spark-load提交任务成功,yarn的程序运行失败

Viewed 47

任务可以提交到yarn,yarn的程序日志中出现
Error: Could not find or load main class org.apache.spark.deploy.yarn.ApplicationMaster
image.png
fe的日志为:
image.png

1 Answers

目前建议先换用其它的方式(比如spark connector sink)替换spark load,这块兼容问题较多;预计4月底会进行重构、届时可以再考虑spark load。