spark-load提交任务成功，yarn的程序运行失败

Viewed 60
2.0

任务可以提交到yarn，yarn的程序日志中出现
Error: Could not find or load main class org.apache.spark.deploy.yarn.ApplicationMaster
image.png
fe的日志为：
image.png

1 Answers

目前建议先换用其它的方式（比如spark connector sink）替换spark load，这块兼容问题较多；预计4月底会进行重构、届时可以再考虑spark load。

张彬华7698
Related Questions
各位大哥在通过k8s安装doris3.0的时候，有没有遇到cg启动不起来，提示Set max number of open file descriptors to a value greater than 60000.
1 answers
doris2.0.2.1大量delete语句和stream load执行在5分钟左右
1 answers
doris主键表可以bucket配置太小，怎么修改？
1 answers
flink-doris-connector-1.20.24.0.0 2pc ，checkpoint处恢复数据重复
1 answers
datax同步数据到doris，任务间断性失败。
1 answers
Doris数据库建表超时
1 answers