cccc 1

• asked Oct 18, 2024

doris外部表方式增量同步数据，速度很慢

我目前通过doris外部表的方式，采集业务库的数据（亿级），利用子查询每次基于自增主键id（增量标识基于doris的目标表查询），增量同步10000条数据到doris目标库中，执行效率很低，不用子查询的情况下，执行效率正常，麻烦帮忙看看会是哪里存在问题？ 目前分析了profile文件，发现子查询和业务查询的sql被拆成了两条sql语句在不同be节点上执行了，求指教是不是这个原因导致的问题，需要怎么解决？ 外部表子查询，需要3m左右 {code...}

2.1

0 votes

1 answers

111 views

芥末0000 5

• asked Oct 18, 2024

max_user_connections占用不高，max_query_instances占用很高，导致查询报错

配置 32核 + 128Gb db1：fe + be db2：be 入库方式：stream_load 并发进程：500 问题 max_user_connections设置到2000，show proc "/current_backend_instances"记录到2000 max_user_connections设置到8000，show proc "/current_backend_instances"也记录到8000

2.1

0 votes

1 answers

97 views

like1981 1

• asked Oct 18, 2024

IPv6 部署FE join false问题

部署环境：BC-linux 8.2 和龙蜥8.6 等多个环境下，部署2.1.6版本，采用ipv6地址进行部署 参考官网教程部署 虚拟机环境，部署正常 实体主机，裸金属部署出现FE join 显示为false 尝试建表和查询均正常。 FE join 显示异常是否正常？希望提供些排查思路，join false的影响是什么？

2.1

0 votes

2 answers

177 views

____ 1

• asked Oct 18, 2024

doris_fe_image_write短时间上涨到77,并维持不动

Doris版本：2.0.8 doris manager监控image_write不为1，持续报错，请问这是什么原因，如何才能进行修复。 doris manager截图

2.0

0 votes

3 answers

99 views

tumg 5

• asked Oct 18, 2024

【2.1.4版本】left join的查询右表的字段时无法使用左表物化视图

其中report_hour的物化视图包含：date、timestamp、sum(times) ts_timezone_mapping 是个时区信息表，ttm_timestamp是该表的唯一键 【无法使用物化视图】查询场景：SELECT ttm_utc_0_date,SUM(times) AS times FROM report_hour LEFT JOIN ts_timezone_mapping ON timestamp = ttm_timestamp WHERE date=...

2.1

0 votes

1 answers

88 views

王海平 1

• asked Oct 18, 2024

sql中用了in与不用in后，查出来的数据有差异

图1：  图2：  图3：   执行嵌套子查语句如图1，子查询语句如图2，执行时子查询的查询结果为1条，且在最外层对应的数据也为1条，如果直接使用嵌套查询，返回结果时多条（详见图1），会将无关数据返回，如果单独将子查询返回结果放入in条件中，如图3，同样的sql，将会返回正确结果，即1条

2.0

0 votes

1 answers

126 views

Jrebel 2

• asked Oct 18, 2024

doris审计日志获取sql，没法直接执行

由于可能会需要通过quickbi等服务查询doris，通过审计日志查询的时候，获取到的sql直接成为一行了。 （如果中间有注释 -- 的情况）如果把sql直接执行是会报错的

2.1

0 votes

2 answers

65 views

____ 1

• asked Oct 18, 2024

Doris 2.1.6删除workload group后，information_schema.workload_group_privileges查询权限报错

Doris 2.1.6 测试workload group，删除一个group后， select * from information_schema.workload_group_privileges; 用这个语句查询权限时，报错：SQL 错误 [1105] [HY000]: errCode = 2, detailMessage = Workload group g1 does not exist

2.1

0 votes

1 answers

45 views

endlesscyl 58

• asked Oct 18, 2024

Doris FE短时间内堆内存打满，如何排查诱因

版本：2.0.3 环境：3FE节点 FE机器为16核、64G，FE堆内存设置46G 时间：2024-10-17 13:07-2024-10-17 13:08 【UTC】 现象：FE在短时间内【2-3分钟】，FE堆内存由20G使用飙升至46G，且GC不释放内存，导致FE master节点和一个从FE节点失联，只存活一个FE节点。 问题： 1、如何定位短时间内jvm快速增长的诱因？ 2、重启2问题FE的时候，一直无法启动 日志一直打印[Env.waitForReady():938...

2.0

0 votes

2 answers

243 views

xiaofan2015 5

• asked Oct 18, 2024

相同sql执行多次时间提升明显如何无法定位sql优化原因

相同sql执行多次时间提升特别明显，把fe的cache关了（ set enable_sql_cache=false).相同时间集群资源变化不大。不能复现问题

2.0

0 votes

1 answers

73 views