aalwd 13

• asked Jul 5, 2024

workload group 内存隔离问题

使用内存硬隔离, 发现如果设置并行度较多的时候,进行压测, 使用内存仍然高于设定值, 也就是内存硬限没有生效, 问下这个为什么

2.1

0 votes

2 answers

140 views

wangzh 1

• asked Jul 5, 2024

Doris在后续版本规划中是否可以对unique模型下的批量删除进行优化使之更加易用？

背景 在对doris进行数据开发过程中，发现没法像传统OLTP使用SQL进行大批量的删除操作 问题点 在unique模型下，进行批量删除只能通过BAR Load进行外部操作，没法通过SQL语句进行批量删除操作，在实际开发过程中会有很大的局限性，易用性及便捷性非常不友好。 建议&期望 社区后续是否可以对批量删除进行优化，使之更加易用，降低开发过程中的不便性

2.1 demand

0 votes

1 answers

137 views

东方红 17

• asked Jul 5, 2024

Doris告警 Image Write failed

1，检查监控发现Image Write failed数量增长很快： 2，我们有10个Routine load数据导入任务，最近一周半数都有OtherMsg信息： 2024-06-29 08:57:17:errCode = 2, detailMessage = failed to send task: Socket is closed by peer. 2024-07-04 18:00:08:errCode = 2, detailMessage = failed to send...

2.0

0 votes

4 answers

461 views

changguowei 199

• asked Jul 5, 2024

【已解决】查询报错sync filter size meet error, filter: RuntimeFilter，如何处理？

查询报错：sync filter size meet error, filter: RuntimeFilter: (id = 0, type = in_or_bloomfilter, need_local_merge: false, is_broadcast: false, build_bf_cardinality: true 应该如何调整参数？ 我尝试了left join和right join都没有问题，只有inner join存在问题

2.1

0 votes

1 answers

229 views

doaneyang 13

• asked Jul 5, 2024

【已解决】Doris命中索引的机制

查询条件带了前缀索引的字段，也带了BloomFilter索引的字段，Doris命中了前缀索引之后，还会再命中BloomFilter索引吗，如果还有bigmap索引也会一起命中吗？

1.2

0 votes

1 answers

137 views

____ 3

• asked Jul 5, 2024

【已解决】2.0.12，BE通过curl动态修改变量，集群其他BE不同步吗

比如 curl -X POST http://10.146.4.30:8040/api/update_config?max_send_batch_parallelism_per_job=20&persist=true 设置max_send_batch_parallelism_per_job后，只有这一台生效，其他BE没有同步

cluster 2.0

0 votes

1 answers

55 views

yugunsung 117

• asked Jul 4, 2024

【已解决】关于workload group的几个问题？

版本：2.0.12 启用workload group需要修改配置重启fe吗？set frontend config是临时生效还是永久生效？ 默认normal是需要手动创建吗？show workload groups命令没有任何结果输出？ 一个用户属于多个workload group，那么这个用户能使用的资源是多个workload group之和？ workload group内存使用超出限制后将立即cancel组内内存占用最大的若干个任务，这个任务数是怎么确定的？

2.0 faq

0 votes

1 answers

173 views

椰子Echo@SelectDB 1111

• asked Jul 4, 2024

【回顾&资料获取】Apache Doris x 天翼云联合 Meetup@上海站

Apache Doris「城市行」正式回归，首站登陆上海，现已圆满结束！ 活动详情 在数字化浪潮的推动下，各大企业都在经历数据量爆发式增长带来的实时数据处理及分析的挑战，如何在数据洪流中探索更为经济高效的解决方案，成为大数据从业者与管理者首要关注的目标。 为帮助社区伙伴更快找到答案，飞轮科技与天翼云联合发起本次上海城市行 Meetup，并邀请来自天翼云、翼支付、Cisco、哪吒科技、众安国际等多位社区技术大咖，带来 Apache Doris 在不同行业的应用实践，分享其在湖仓...

community

3 votes

4 answers

934 views

____ 3

• asked Jul 4, 2024

【缺少关键信息】上游是maxwell采集的日志格式 Doris sink无法实现删除功能

上游日志格式是 maxwell 采集的 , 取出了json里的data json字符串,并根据maxwell的删除标志手动添加了 __DORIS_DELETE_SIGN__字段,删除时__DORIS_DELETE_SIGN__字段值为1,否则为0. doris版本 1.2.2 doris sink代码如下 {code...}

1.2

0 votes

1 answers

82 views

yadao 29

• asked Jul 4, 2024

【已解决】doris resource_group不同的划分方案能否提高节点可用性?

背景 生产环境数据目前是存的3副本, 现有6个be节点, 启用了doris的resource_group特性, 一个writer分组对应4个节点承担2个副本, 一个reader分组对应2个节点承担一个副本 问题 这种部署划分方案下, 最多允许挂掉几台be? 以下是我们的测算, 不知道是否正确 我们自己测算的话, reader分组两台都可以挂掉, 从writer分组下进行读写. writer分组最多只能挂1台, 挂两台可能部分表的2个副本刚好在这两台机器上就只剩下一个副本了. ...

cluster 2.0 faq

1 votes

1 answers

138 views