changguowei 199

• asked Jul 7, 2024

【已解决】查询routine load消费下来的doris表报错missed_versions is empty，如何处理？

麻烦问一下，我们有张表数据是通过routine load任务实时消费kafka，查询这张表时有时会报如下错误，这个是bug吗？ errCode = 2, detailMessage = (ali-doris-prod-02)[CANCELLED]missed_versions is empty, spec_version 196888, max_version 199317, tablet_id 12661003 问题： 1、missed_versions是指什么版本？spe...

2.1

0 votes

1 answers

256 views

little 5

• asked Jul 6, 2024

【已解决】多字段 like 查询性能分析

分别查询 a b c 三个字段，查询时间都是 0.3 s，如果同时查的差，应该是大约 1s，为什么实际上同时查询花了 6s，大了 6 倍？ 查询 a 响应时间 0.3 s {code...}

performance 1.2

0 votes

1 answers

53 views

____ 23

• asked Jul 6, 2024

关于多个hive Metastore如何处理的问题

在连接hive或者hudi的时候需要将 core-site.xml，hdfs-site.xml 和 hive-site.xml 放到 FE 和 BE 的 conf 目录下。在多个不同的hive Metastore的时候就有不同的三个xml文件，这种时候如何处理。是通过改名的形式处理还是每一个hivemetastore对应一个doris集群

2.1 catalog demand

0 votes

1 answers

68 views

张涛 37

• asked Jul 5, 2024

【已解决】Doris 实际性能与官方文档性能测试不符，差距较大

官方测试文档中60亿数据联表查询返回时间在150ms左右，我本地部署了三个BE，一个FE的集群，集群机器配置48C 256G，其中FE与一个BE在同一节点，两个表是unique 模型，A表6.5亿，有5列，B表31亿，有39列，执行SQL如下 select reg.province,reg.aaa,count(reg.id) as num from (select province,aaa,id from td_sub_A where DATE_SUB(CURDATE(), ...

2.1 performance

0 votes

2 answers

187 views

aalwd 13

• asked Jul 5, 2024

workload group 内存隔离问题

使用内存硬隔离, 发现如果设置并行度较多的时候,进行压测, 使用内存仍然高于设定值, 也就是内存硬限没有生效, 问下这个为什么

2.1

0 votes

2 answers

83 views

wangzh 1

• asked Jul 5, 2024

Doris在后续版本规划中是否可以对unique模型下的批量删除进行优化使之更加易用？

背景 在对doris进行数据开发过程中，发现没法像传统OLTP使用SQL进行大批量的删除操作 问题点 在unique模型下，进行批量删除只能通过BAR Load进行外部操作，没法通过SQL语句进行批量删除操作，在实际开发过程中会有很大的局限性，易用性及便捷性非常不友好。 建议&期望 社区后续是否可以对批量删除进行优化，使之更加易用，降低开发过程中的不便性

2.1 demand

0 votes

1 answers

74 views

东方红 13

• asked Jul 5, 2024

Doris告警 Image Write failed

1，检查监控发现Image Write failed数量增长很快： 2，我们有10个Routine load数据导入任务，最近一周半数都有OtherMsg信息： 2024-06-29 08:57:17:errCode = 2, detailMessage = failed to send task: Socket is closed by peer. 2024-07-04 18:00:08:errCode = 2, detailMessage = failed to send...

2.0

0 votes

3 answers

255 views

changguowei 199

• asked Jul 5, 2024

【已解决】查询报错sync filter size meet error, filter: RuntimeFilter，如何处理？

查询报错：sync filter size meet error, filter: RuntimeFilter: (id = 0, type = in_or_bloomfilter, need_local_merge: false, is_broadcast: false, build_bf_cardinality: true 应该如何调整参数？ 我尝试了left join和right join都没有问题，只有inner join存在问题

2.1

0 votes

1 answers

127 views

doaneyang 13

• asked Jul 5, 2024

【已解决】Doris命中索引的机制

查询条件带了前缀索引的字段，也带了BloomFilter索引的字段，Doris命中了前缀索引之后，还会再命中BloomFilter索引吗，如果还有bigmap索引也会一起命中吗？

1.2

0 votes

1 answers

85 views

____ 3

• asked Jul 5, 2024

【已解决】2.0.12，BE通过curl动态修改变量，集群其他BE不同步吗

比如 curl -X POST http://10.146.4.30:8040/api/update_config?max_send_batch_parallelism_per_job=20&persist=true 设置max_send_batch_parallelism_per_job后，只有这一台生效，其他BE没有同步

cluster 2.0

0 votes

1 answers

31 views