doris 2.1.3 OOM 问题

Viewed 79

1ad8ec3883413d0a10f9c032f08b3b3.png

我们的doris 目前受限于硬件,只有32g的内存,近期经常OOM,想请教一下我怎么跟踪这种问题SQL呢?
这个截图是BE.INFO的log,看到有一个SQL占用了40+GB

场景是:oracle的跑批场景用存储过程调用的,转到doris这边,因为doris没有过程,所以用了kettle来调度跑循环清洗拆分数据。

2 Answers

oracle那边的基础数据已经迁移到doris了。是根据doris的表,再拆分出来数据的时候跑循环出问题了。

基于这个query_id,在fe/log/fe.audit日志里面进行检索,也可以安装审计日志创建直接通过sql的方式进行检索定位:审计日志插件