阿杜2024 3

• asked Sep 3, 2024

flink-doris-connector-1.16-1.6.2 的 lookup-join ，在 cache-miss 时，性能表现不佳

背景：1520万行的 paimon 事实表，lookup-join doris 维表(183条数据)，打宽之后写入 paimon 另一张表。 问题：整体 ETL 吞吐量较低，大约 1122条/秒。 期望：整体吞吐量能达到大于或等 1万/秒。 原因：发现 1520万 的源数据中，超过 80% 的数据不能命中 doris 维表，即使开了 doris lookup 缓存也无效果。 其它试验： 1、当大量或全量源数据 cache-hit doris 维表时，吞吐量能达到 4万条/秒。...

2.1

0 votes

4 answers

113 views

ROCKY 3

• asked Sep 2, 2024

docker pull apache/doris:build-env-for-2.0 无法下载，一直报错： connect: connection refused

报错如下： [root@master doris]# docker pull apache/doris:build-env-ldb-toolchain-latest Trying to pull repository docker.io/apache/doris ... build-env-ldb-toolchain-latest: Pulling from docker.io/apache/doris 200d8544077b: Pulling fs layer a3ed9...

2.1

0 votes

1 answers

51 views

文小誉123 15

• asked Sep 2, 2024

doris-Streamloader设置首行过滤导入存在数据丢失问题

发现csv文件数据量在千万以上，设置过滤首行，会存在数据丢失情况，并且过滤首行也没有生效，发现数据中还是存在首行字段。

2.1

0 votes

1 answers

80 views

it123wb 3

• asked Sep 2, 2024

streamload怎么规避关键字列名

使用streamload在导入本地文件时候，列字段未index 关键字，提示detailMessage = Syntax error in line 1:\nCOLUMNS (index,username,city,age,sex,...\n ^\nEncountered: INDEX\nExpected: INDEX is keyword, maybe INDEX\n"，尝试添加 `` 发现仍然不起作用

2.1 2.0

0 votes

1 answers

39 views

Loki 5

• asked Sep 2, 2024

doris2.1.5内存异常问题

单节点内存异常compaction score可以达到250，其他节点只有50，导致内存表飙高，被系统oom killer杀掉

2.1

0 votes

1 answers

95 views

JeffreyNie 6

• asked Sep 2, 2024

Version 2.1.5 Failed to try table 表名 write lock. timeout 3000 MILLISECONDS.

想咨询一下，具体什么原因造成，有什么解决方案？ 具体报错内容如下： RuntimeLogger 2024-09-02 07:22:38,610 WARN (mysql-nio-pool-219|4837) [ConnectContext.kill():900] kill query from 113.110.215.233:1655, kill mysql connection: true RuntimeLogger 2024-09-02 07:51:08,147 WARN ...

2.1

0 votes

1 answers

189 views

炳裔 45

• asked Sep 2, 2024

【已解决】doris2.1.5及之后版本没法在官网下载了么

2.1

0 votes

1 answers

99 views

张涛 37

• asked Sep 2, 2024

mybatis执行删除，出现预编译SQL中占位符为替换情况

doris版本2.1.3 项目使用mybatis连接doris，操作数据增删改，在日志文件中出现部分SQL，占位符的?未被替换为实际的值，直接提交到doris，但有SQL是正常的，未替换的SQL占比较少，日志中报错detailMessage = Only support prepare SelectStmt or NativeInsertStmt 日志如下： 2024-0*-02 。。。335 [query] |Client=10...:43073|User=im_rw|Ct...

2.1

0 votes

2 answers

111 views

张涛 37

• asked Sep 2, 2024

doris执行select count查询特别慢

doris版本2.1.3 执行select count(*) from table耗时很久，之前查询耗时在3秒左右，总量数据约23亿，当前查询时间需要 456214 ms，多次执行，耗时都特别高，Fe，BE节点资源占用不高，请问有大佬你知道是什么情况吗

2.1

0 votes

2 answers

127 views

张涛 37

• asked Sep 2, 2024

delete数据报错delete job timeout

doris版本2.1.3 删除数据日志显示异常，执行时间特别慢，报错信息：delete job timeout, timeout(ms):30000, msg:unfinished replicas [BackendId=TabletId]: 10105=2875402, 10105=2875390, 10105=2875406, 10105=2875378, 10105=2875394 出现较多删除报错，执行生气了：DELETE FROM table_t WHERE (pr...

2.1

1 votes

2 answers

111 views