asynn 1

• asked Sep 19

Doris存算分离架构压测指标上不去

目前我用3台112核476GiB，带宽上限为35Gbps的机器配置了一个存算分离集群，每台机器上都有一个FE和BE，每台机器有四块1T的盘用作file_cache，远端用s3存储。 压测脚本使用stream_load的方式、使用128个线程、100000的batch去写入数据。 Insert success, this batch: 1000000 rows, 287.68 MB, cost:8981ms这是写入一次的大小。 但是我通过查看Grafana，发现每台机器的CPU...

ingestion

0 votes

1 answers

55 views

wayne 1

• asked Sep 19

Flink CdcTools 使用Oracle XStream方式 初始化时无问题，在增量同步时无法识别Oracle Date类型数据，会将目标字段值设为NULL

AI给出结论： XStream 走的是二进制 LCR（Logical Change Record），Oracle DATE 存储为 7 字节格式（不是标准 JDBC TIMESTAMP），需要 Connector 端解码。 一些 FlinkCDC 版本对 DATE → TIMESTAMP 的解码缺失，导致 Debezium 直接丢 null 给下游

ingestion

0 votes

1 answers

35 views

wayne 1

• asked Sep 19

Flink CdcTools 使用Logminer方式 oracle 如果使用@dblink将其他库数据插入源库会导致SCN跳跃 增量失败

2025-08-27 18:56:54,865 INFO org.apache.doris.flink.sink.writer.DorisStreamLoad [] - table TEST_TAB start execute load for label label_1756292139498_TEST_TAB_0_20 2025-08-27 18:56:56,981 WARN io.debezium.connector.oracle.logminer.processor....

ingestion

0 votes

1 answers

28 views

wayne 1

• asked Sep 19

Flink CdcTools 使用Logminer方式 oracle 单库模式下 如果某张表 列名长度超30字符 将无法捕获

completeTable 'test_tab' won't be captured by Oracle LogMiner because column 'TEST_XXXXXXXX_XXXXXX_EFFECT_TIME' exceeds 30 characters. doris版本 apache-doris-2.1.10 flink-doris-connector-1.20-24.0.1.jar flink-sql-connector...

ingestion

0 votes

1 answers

38 views

yezinong 1

• asked Sep 19

用Doris Manager升级3.0.7到到3.1.0版本，提示“升级版本有依赖关系”

如图，是什么原因呀，该如何处理？

3.0

0 votes

1 answers

35 views

labuladuo 17

• asked Sep 19

3.0.4存算分离导入报错

meta server报错： I20250919 09:29:58.636054 73741 meta_service_helper.h:99] finish commit_txn from 10.21.242.244:50830 response=status { code: KV_TXN_CONFLICT msg: "failed to commit kv txn, txn_id=2175816452255744 err=Conflict" } versi...

3.0

0 votes

1 answers

62 views

mortal 13

• asked Sep 19

【Doris Manager v25.0.0】 开启集群巡检、在执行四个巡检任务、一直卡着

版本: Doris Manager v25.0.0 问题: 开启集群巡检、在执行四个巡检任务、一直卡着

manager

0 votes

1 answers

41 views

wcj 1

• asked Sep 19

doris3.1版本，资源使用不高的情况下，频繁报brpc错误

doris3.1版本，9台服务器，3个fe节点，9个be节点。报错日志见附件。频繁报其中一台服务器brpc通信有问题，无法连接。 W20250919 11:46:03.726321 3704128 load_stream_stub.cpp:359] LoadStreamStub load_id=2802af132031451e-a5ac49934858f58b, src_id=1750424923086, dst_id=1757417361464, stream_id=301...

3.0 faq

0 votes

1 answers

39 views

XuChao 1

• asked Sep 19

EXPLAIN语句执行问题

最近在做数据血缘的相关工作，对explain语句的解析有两个问题 EXPLAIN VERBOSE语句在查询insert语句的时候，OLAP TABLE SINK输出的TUPLE ID对应的TupleDescriptor的tbl内容为null 如SQL语句 {code...} 但实际无法执行形如EXPLAIN MEMO PLAN这样的语句，会报语法错误，请问是什么原因

2.1 query

0 votes

1 answers

34 views

leslie 1

• asked Sep 19

doris升级到2.1.9后新建的主键表在部分更新不存在的key时不会报错

根据官方文档 主键模型在严格模式下部分更新不存在的key时应当报错。但是我们发现，在doris升级到2.1.9以后新建的主键表并没有阻止此类更新，而是能成功插入： {code...} 然而在升级版本以前就创建的旧表tmp_test上，就会正常报错：

partial-update 2.1

0 votes

0 answers

34 views