为什么spark-submit无法部署到YARN？

Question

我在spark中运行一个简单的java应用程序，但是当我尝试提交应用程序时，它显示无法从Jar文件加载主类。 这是错误的快照。

Answer 1

您需要提供--class和--master参数。

spark-submit --master yarn-client --class spark.examples.SimpleApp /root/simple-project-1.0.jar hdfs://myserver1:8020/user/root/hackrfoe.txt