workload groups 设置是否合理

Viewed 5
2.1

image.png

请问我的workload groups 设置是否合理，目前我的情况是be和fe是混合部署的，机器是32c64g。日常跑批还是会把内存打满。请问参数如何设置才最合理？

1 Answers

这里其实是要关注几个点：

  1. 是一个大任务导致的还是很多任务同时提交导致的
    a. 如果是一个大任务导致，那么你得升级到4版本开启落盘
    b. 如果是多个小任务的话，那么用workload group 做一下队列限制，把 max_concurency 改小，让其排队

image.png

阿渊@SelectDB (没回帖直接加我主页微信)9990
Related Questions
workload groups 设置是否合理
1 answers
flink更新Doris数据
1 answers
be streamload任务超时被取消但scanner线程出现coredump
1 answers
doris 2.x 同步到哪个版本的doris 最稳定
1 answers
doris配置ranger鉴权后，单表查询可以看到脱敏效果，但是关联查询后就失效了
2 answers
你好，我们目前进行集群的升级中，升级到2.1.11后，这几天遇到问题老年代gc一直占满，然后不断allocrion failure，最后节点与其他fe通信受限导致exit，这个问题能不能帮忙解决一下
1 answers