mile xu 7

• asked Sep 11

Apache Doris内存不够，为什么Tablet不排队一个个处理，而是报错，请问这个解释对吗？

要理解 Apache Doris 内存不足时不采用 Tablet 排队处理，而是直接报错的原因，需要从其设计目标、MPP 架构特性、内存模型、资源调度逻辑四个核心维度拆解 ——Doris 的本质是 “低延迟实时 OLAP 数据库”，而非 “批处理任务调度系统”，其设计优先级决定了 “快速失败” 比 “排队等待” 更合理。 一、核心前提：Doris 的设计目标与 Spark 的本质差异 首先要明确一个关键区别： Spark是 “批处理 / 流处理引擎”，核心目标是 “稳定处理大...

content

0 votes

1 answers

108 views

mile xu 7

• asked Sep 11

Apache Doris内存不够，为什么不像spark一样排队处理，Tablet排队一个个处理，而是报错，请问这个解释对吗

要理解 Apache Doris 内存不足时不采用 Tablet 排队处理，而是直接报错的原因，需要从其设计目标、MPP 架构特性、内存模型、资源调度逻辑四个核心维度拆解 ——Doris 的本质是 “低延迟实时 OLAP 数据库”，而非 “批处理任务调度系统”，其设计优先级决定了 “快速失败” 比 “排队等待” 更合理。 一、核心前提：Doris 的设计目标与 Spark 的本质差异 首先要明确一个关键区别： Spark是 “批处理 / 流处理引擎”，核心目标是 “稳定处理大...

2.1

0 votes

1 answers

93 views

zhangxi 1

• asked Sep 11

Cascades 优化器经过严格验证吗

最近看优化器的代码，感觉bug有点多啊 TopDownVisitorRewriteJob.java {code...} List validRules = new ArrayList<>(allRules); 这啥都没过滤后面的add还让规则重复了

performance

0 votes

1 answers

22 views

Tuzi 1

• asked Sep 11

无法识别关键字 ROUTINE LOAD：no viable alternative at input 'CREATE ROUTINE'

测试环境 docker doris-all-in-one2.1.0 之前有创建成功过routine load 任务，从kafka读取数据 但是今天新建任务发现一个奇怪的报错，信息像是无法识别关键字 routine，而且之前创建成功的语句拿过来再次执行也同样失败

2.1

0 votes

1 answers

14 views

mile xu 7

• asked Sep 11

为什么相同的内存，执行一样的任务，spark可以执行完，但是doris却报内存不足错误，doris已经调整了单个任务可以使用集权资源的80%

doris版本2.1.0 2台服务器 ALTER WORKLOAD GROUP normal properties ('memory_limit' = '50%'); 修改了normal单个任务可使用内存为90% 配置一台32G内存，一台48G内存，执行一个SQL。 报错1105 - errCode = 2, detailMessage = (t247)[CANCELLED]work load group memory exceeded lim...

2.1

0 votes

1 answers

50 views

aalwd 13

• asked Sep 11

关于workloadGroup

现在如果有集群原本有5台be, 都开启了cgroup, 集群对用户使用了workloadGroup, 但是我新加的一台机器be如果是虚拟机器, 没开cgroup, 加入这台机器会影响使用吗?

2.1

0 votes

1 answers

13 views

seawenc 13

• asked Sep 10

CREATE JOB不支持insert overwite

看官网说明:CREATE JOB 只能支持insert into,为何不再支持一下insert overwite呢，这个场景应该很觉啊，比如： 大数据lambda架构中不是要求离线任务产生的数据要覆盖实时任务的数据么，如果有job能支持insert overwite，那就不需要外部调度工具了

demand

1 votes

2 answers

17 views

seawenc 13

• asked Sep 10

2.1.11版本集成Ranger后，字段脱敏不可用，行过滤偶尔不可用

版本：2.1.11 Ranger版本：2.5.0 账号为LDAP账号 表权限与字段权限这些是生效的，但就是行权限与mark权限不生效 请帮忙在下一个版本解决一下呢 1、如下脱敏无效 打断点，发现程序在报错： {code...} 2、行过滤偶尔无效 不是经常发生，也没搞明白何时才能触发不生效

2.1

0 votes

2 answers

32 views

wanggx 3

• asked Sep 10

be挂掉，be.out提示Abort due to name conflict

Doris2.1.8.1 ARM版本，只出现过一次，重启就恢复正常

2.1

0 votes

1 answers

17 views

zc 1

• asked Sep 10

Doris 错误信息提示不准确

Doris 版本： 2.1.9 问题描述： dm_dm_sv_is_inhos_pat_info_view 和 dm_dm_cz_ca_pat_info_view 都是视图,单独查询视图能正常查询，并且没有任何错误。 问题：当两个视图连接查询时， 当on条件后边出现两个不在视图中出现的字段时， 会报错，但是报错信息匹配不上。 示例：如下我有一个sql ，两个sql 关联， 其中 on条件（i.aaa_id =p.aaa_id） aaa_id在 两个视图都不存在。但是报错不提示...

2.1

0 votes

1 answers

22 views