王艳忠 42

• asked Jul 17, 2024

2.14 workload group 设置不生效

1、 创建 workload group 并且限制并发为1 排队1 create workload group if not exists g1 properties ( "cpu_share"="1024", "memory_limit"="30%", "enable_memory_overcommit"="true", "max_concurrency" = &...

2.1

0 votes

1 answers

32 views

jency401 15

• asked Jul 17, 2024

2.0.11使用streamloader提示Access denied for user 'default_cluster:aaa@ip' (using password: YES)

使用命令： doris-streamloader -u "aaa":"123123" --source_file="large*" --url="http://ip:5430" --header="column_separator:|?columns:id1,id2,id3,id4" --db="dwd" --table="tmp_data" --workers 8...

2.0

0 votes

1 answers

74 views

起飞小宇 1

• asked Jul 17, 2024

doris 2.1.3 OOM 问题

我们的doris 目前受限于硬件，只有32g的内存，近期经常OOM，想请教一下我怎么跟踪这种问题SQL呢？ 这个截图是BE.INFO的log,看到有一个SQL占用了40+GB 场景是：oracle的跑批场景用存储过程调用的，转到doris这边，因为doris没有过程，所以用了kettle来调度跑循环清洗拆分数据。

2.1

0 votes

2 answers

82 views

彗星来的那一夜 1

• asked Jul 17, 2024

首次安装Doris的be启动失败

环境：主机是京东云2核2G的云服务器，jdk版本是1.8，Doris的版本是2.0.3。 首次安装fe也启动成功了，这里的GC是内存不够吗，可是我看Doris官网说对内存没有限制呀 启动be ./bin/start-be.sh报错 {code...}

2.0

0 votes

1 answers

155 views

awol2005ex 9

• asked Jul 17, 2024

发现使用 <=> 进行大表关联就会报错，然后be挂掉 （版本2.1.4）

发现使用 &lt;=&gt; 进行大表关联就会报以下错误，然后be挂掉 （版本2.1.4） F20240716 17:37:28.067122 55999 column.h:631] Column Nullable(Int8) is not a contiguous block of memory 9# doris::vectorized::IColumn::get_raw_data() const at /home/zcp/repo_center/doris_release...

2.1

0 votes

2 answers

42 views

七彩黑虫 7

• asked Jul 17, 2024

EXPORT TABLE 能否导出整个库？

目前看官方文档，EXPORT TABLE 只能指定单个表进行导出，是否支持导出整个库或多张表? 类似于： {code...}

2.1

0 votes

1 answers

32 views

xiaofan2015 5

• asked Jul 16, 2024

doris be使用clion 配置不能debug

按照官方文档 [https://doris.apache.org/zh-CN/community/developer-guide/be-clion-dev/] 配置不生效，通过/hadoop/workspace/doris/be/build_Debug/src/service/doris_be、/hadoop/workspace/doris/doris_be/be/lib/doris_be 等脚本都可以启动be，但是clion启动后没有效果，只报错Command timed ...

2.0

0 votes

1 answers

67 views

forest 35

• asked Jul 16, 2024

doris-streamloader 导入报错 Entity Too Large 数据包大约400G

doris 导入 单个表csv 大于100g 除了拆文件是否还有其他的处理方法

2.1

0 votes

1 answers

55 views

Yangboxiao 47

• asked Jul 16, 2024

关于动态分区与自动分区的建议。

当前版本：2.1.4 生产场景：需要按天，平台字段进行幂等更新。 举例：当前有几个 job 需要同时更新同一张表。表设计如下 {code...} 问题 3: TRUNCATE/INSERT OVERWRITE 对分区处理时不太便利 能否合并动态分区/自动分区功能，统一管理分区。 其他： 问题描述：在修改分区时触发的一个bug，导致 BE 宕机，没有自动重启，此问题非稳定复现。

2.0 data-partition

1 votes

2 answers

222 views

changguowei 199

• asked Jul 16, 2024

hive变更字段名称后，doris查询hive变更字段为空数据

Doris2.1.4版本 hive中变更了字段名称，doris查询查不到变更后的字段数据，数据为空； hive catalog有设置定时10分钟刷新元数据，而且也手动执行了刷新表REFRESH TABLE hive.huan_union.dim_ak_dmp_ta_macpool_tmp也没有效果； 这个应该如何处理？ 变更语句如下： alter table huan_union.dim_ak_dmp_ta_macpool_tmp change column time_ran...

2.1

0 votes

1 answers

31 views