endlesscyl 58

• asked Dec 13, 2024

2.1.6 FE JVM内存问题以及外表读取S3文件Fail to do Snappy decompress问题

当前版本：2.1.6 存在问题： 1、FE JVM内存会在元数据在cache大量file文件时候被打爆 2、在hive外表【数据存储S3，snappy压缩，parquet文件】查询时候，会出现Fail to do Snappy decompress问题，相关文件通过spark读取是没问题的。 上述问题有没有修复，有修复的话麻烦贴一下PR链接；没修复的话，有没有相关解决方案！

2.1 catalog cluster

0 votes

1 answers

43 views

Z.Lee 1

• asked Dec 13, 2024

Doris 2.1.2 colocation join 报E-3113

doris 版本是2.1.2 sql语句是 一个 with 子句模式是 select 所有列 from table1 （一堆条件）和另外一个表进行left join 连接类型是colocation join 两个表都是分区表 每个表参与运算的都有90个分区。测试中with子句的结果集是空 fe 报错 024-12-12 09:29:32,812 WARN (thrift-server-pool-3629|2349029) [Coordinator.updateFragment...

2.1 query

0 votes

2 answers

49 views

____ 11

• asked Dec 12, 2024

审计日志保留时长没有生效

doris-2.1.5 fe.conf 中配置 audit_log_delete_age = 7d，但是日志文件一直没有删除 另一个问题：GC日志怎么缩短保留时长 目前仅fe.log和fe.warn.log日志的保留时间是正常的

2.1

0 votes

1 answers

59 views

danvid 5

• asked Dec 12, 2024

insert select MySQL与直接select 耗时有差异

如题 单跑下面的 select 语句只需要几十毫秒，但是select insert 确要几秒，实际上insert的数据并不多只有几十条 {code...} 上图是selectinsert 扫描行数，与 a b 表总行数一致， 上图是单select 的扫描行数，与过滤后的行数一致，感觉没有把过滤数据进行下推

2.0

0 votes

2 answers

80 views

今晚打老虎 13

• asked Dec 12, 2024

doris2.1.0的flink连接器一直写不进数据

org.apache.doris flink-doris-connector-1.18 1.6.0 使用上述连接器，用flink从kafka读取数据并写入doris {code...}

2.1

0 votes

1 answers

98 views

TYL13 1

• asked Dec 12, 2024

想要实现带条件的聚合方式, 有办法实现吗?

比如有这样的一个表, 聚合字段希望其能在某个区间做 min 聚合, 超出区间则用 replace {code...} 对应的 Q&A 在 github 也是我提的: [https://github.com/apache/doris/discussions/45302]

2.1

0 votes

1 answers

61 views

huangkz 1

• asked Dec 12, 2024

Doris备份管理

请教下我用了minio实现了数据备份，但是如何实现备份的数据管理？ 是不是可以通过删除这些SNAPSHOT来实现管理？

manager 2.0 backup

0 votes

1 answers

79 views

BingzZ 11

• asked Dec 12, 2024

X2Doris运行任务报错java.lang.NoClassDefFoundError: org/apache/http/client/config/RequestConfig

使用X2Doris导数据的时候Spark任务报错： 24/12/12 09:37:51 ERROR yarn.ApplicationMaster: User class threw exception: java.lang.NoClassDefFoundError: org/apache/http/client/config/RequestConfig java.lang.NoClassDefFoundError: org/apache/http/client/config/...

x2doris

0 votes

1 answers

55 views

leox 3

• asked Dec 11, 2024

一张200亿的表，steam loader数据效率极低

有一张大表200亿，通过steamloader导入数据只有每秒1-2K的rps左右的性能，其他表导入性能在每秒6-8K的rps，请问doris大表导入性能会急剧下降吗？

1.2

0 votes

1 answers

55 views

saber.destiny 5

• asked Dec 11, 2024

doris 页面提交一个任务，cg 收到后，cg pod 会CrashBackOff

compute group 的pod 日志报错~~ {code...}

decoupled 3.0

0 votes

4 answers

151 views