datax 读取 hive ，写入 Doris 速度为 1200行/秒

Viewed 247
ingestion 2.0

datax 机器配置： 4c 8g 100g

数据：600 列 ，3000万行数据

Doris ：三台fe 16c,32g,100g. 四台 be 32c，64g，2t

job 配置文件

生产任务截图
生产截图

是 datax 机器配置不够还是什么原因啊

3 Answers

设置下 datax job的并发试试呢，调整下 channel

阿渊@SelectDB (没回帖直接加我主页微信)9335
zhb123319

可以增加doriswriter的攒批条数和size

JNSimba336
Related Questions
特定情况下锁表问题
streamload 列转换
1 answers
stream load 方式是否支持https协议
1 answers
streamload使用jsonroot导入超大数组chunk问题
1 answers
是Doris 备份上到hdfs 中，现在100m大小左右表，上传那一步很慢要1小时，什么原因
1 answers
flink实时写入doris内部表报错
1 answers