Apache Doris 中文技术论坛
Questions Tags Users Badges

doris2.1.9 insert into 导数据报内存错,既耗内存,又导入失败

Asked Apr 21, 2025 Modified Jan 1, 0001
Viewed 81
2.1

image.png

edited Jan 1, 0001
1
asked Apr 21, 2025
2 Answers

导入数据量实际占用内存,并不是很高
image.png
但是当时跑的任务比较多,所以任务被主动cancel了。
可以通过设置set parallel pipeline task num=1;降低并行度,来降低内存使用,达到任务可以跑的状态。
4.0 版本的workload group 可以设置每个query 使用的内存大小,这样可以在一定程度上,对这个有优化

edited Jan 1, 1970
徐振超@SelectDB8151
answered Apr 22, 2025

通过专业分析,改成了万兆网卡就可以了

image.png

edited Jan 1, 1970
1
answered Apr 23, 2025
Related Questions
streamloaderd成功执行,但是没有导入数据到表里。
1 answers
AUTO LIST PARTITION 分区名长度为何限制 50?能否配置放宽/取消?
doris2.1.11重复建表报错内容异常,不会提示表已经存在
1 answers
我们通过hive catalog外表同步数据,有时候hive表会很大导致内存占满了会杀掉其他任务,限制内存又会导致同步任务失败,有什么方法可以稳定一下呢,同步效率慢一点什么的也没问题
1 answers
Doris的json解析问题
1 answers
doris be启动报错
2 answers

Terms of service Privacy policy

Powered by Answer - the open-source software that powers Q&A communities.
Made with love © 2026 Apache Doris 中文技术论坛.