woshixiaobai 5

• asked Jun 1, 2025

请教一下如果从commit成功的checkpoint恢复时任务时会发生啥

任务失败超过6个小时，直接从最近一次的checkpoint恢复时报commit transaction failed xxx这个错误。如果从最近一次的上一次checkpoint来恢复时是否可行呢？针对checkpoint成功且commit成功的位置恢复时，它是会重新提交事务，但保持幂等么，还是说针对成功commit的情况会自动检测不再重复commit了？

2.1

0 votes

1 answers

28 views

peter 3

• asked May 30, 2025

doris2 列查询性能问题

我们在做doris1.2.7到doris2.1.9的升级验证，发现部分sql会比1慢，排查下来是由于外层列数量导致的，请教一下这种应该怎么优化？尝试了关闭2的优化器和调整了topN的优化，都没什么变化。 如下所示相同数据量和建表语句情况下，在doris1中执行完整sql是2.7s 如果我去掉列，只保留个1，doris1也是2.7s. 在doris2中，如果我执行完整sql是5.8s左右，慢一倍。 如果我去掉列，只保留个1，doris2就只要1.2s，快了一倍。 sql就是里面...

2.1 performance

0 votes

2 answers

75 views

LaughingJun 7

• asked May 30, 2025

doris 3.0.4存算一体执行语句卡死并且kill失败

概述： 1.doris 3.0.4存算一体运行一段时间, 链接数超100等异常信息 2.hive 数据写入doris (catalog) 排查; 1.fe 和be 均正常 2.服务器资源充足 3.数据量很少（千万以下），并且运行再Doris上面任务也很少 4.SHOW PROCESSLIST; kill QUERY QUERY_ID 后依旧存在 kill不掉，日志一直刷 5.fe 与be jstack 日志

3.0

0 votes

2 answers

88 views

yezinong 1

• asked May 30, 2025

Doris3.0.4使用paimon catalog连接带ssl证书的s3报错

创建catalog ddl： CREATE CATALOG paimon_s3 PROPERTIES ( "warehouse" = "s3://dataplat-dev/", "type" = "paimon", "s3.secret_key" = "*XXX", "s3.region" = "us-east-1", "s3.endpoin...

3.0 catalog

0 votes

2 answers

75 views

_青柠__ 1

• asked May 30, 2025

查询doris外部表分区存在穿刺情况

正式环境版本2.1.6 测试环境版本2.1.6 -> 2.1.9，查询doris正式环境外部表分区，仍然有穿刺现象 {code...} 在正式环境中查询该表p20250529分区，是正常的

2.1 query

0 votes

1 answers

47 views

luodesong 5

• asked May 30, 2025

Doris 连接 Paimon 查询的时候报错ArrayIndexOutOfBoundsException

版本是 Doris 3.0.4 + paimon 1.2 问题： 这种可行 这种报错 catalog的构建 {code...} 案例数据数据 hs_user_id client_date client_time data_type page_id page_value target_name app_name src value_c_path ua system_type event_element ip_address data_flag create_time updat...

3.0

0 votes

1 answers

48 views

zhangzeqin 26

• asked May 30, 2025

时间分区字段str_to_date格式不正确后直接全表扫描导致CPU飙升

升级到2.1.10后，又重现与之前提过的情况相同， [升级2.1.7后大表查询CPU利用率飙升] 2.1.8貌似有修复 {code...} 改为正确的格式str_to_date('2025-05-29 17:30', '%Y-%m-%d %H:%i') 则扫描分区正常 期望的结果情况是格式不匹配则报异常或者直接返回空结果

2.1

0 votes

1 answers

45 views

wangwu 1

• asked May 30, 2025

flink读取doris中通过catalog配置的表报错

doris版本：2.1.15 flink版本：1.20.1 flink.connector.version版本：3.3.0-1.20 flink-doris-connector-1.20版本：25.1.0 启动flink读取doris中通过catalog配置的表时，报错argument 'Doris BE' is illegal, value is ''. 在建表语句中手动指定benodes也不行 CREATE TABLE DorisSourc...

2.1

0 votes

1 answers

22 views

XQG 15

• asked May 29, 2025

Doris Paimon Catalog 遇到的问题, 想确认一下是否正确

Paimon 元数据和数据都存储到MinIO Doris 版本 Doris 版本: 2.1.8 问题 想确认一下: Doris 创建 Paimon Catalog, 是只支持读取, 不支持通过 Doris 的 insert into 写入 Paimon Catalog 的表吗? 想确认最终的结果, 是否就是不支持写入Paimon 自己测试的时候, Doris 确实可以查询Paimon Catalog数据, 往Paimon中写数据, 日志中提示: 不支持 通过Doris Pai...

2.1

0 votes

1 answers

32 views

lihao 1

• asked May 29, 2025

doris3.0.3创建udf，jar包找不到

本地打包写好的jar，应该放到什么地方呢？ be:apache-doris-3.0.3/be/lib/java_extensions/java-udf/java-udf-demo-jar-with-dependencies.jar 是放到这里么，还是应该放到哪里，用mysql客户端，是放到mysql客户端的机器中么？

3.0

0 votes

1 answers

45 views