从 Eclipse 启动远程 Spark 作业时出错
Getting error while launching the remote spark jobs from eclipse
当我尝试从 eclipse 将远程 spark 作业启动到 CDH 集群时，该作业被终止，当我看到容器的日志时，我看到以下错误
Log Type: stderr
Log Upload Time: Wed Apr 05 10:56:13 +0530 2017
Log Length: 87
Error: Could not find or load main class org.apache.spark.deploy.yarn.ExecutorLauncher
Log Type: stdout
Log Upload Time: Wed Apr 05 10:56:13 +0530 2017
Log Length: 0
请帮我解决这个问题。
提前致谢
我通过在 spark 上下文创建代码中添加 yarn 的类路径解决了这个问题
当我尝试从 eclipse 将远程 spark 作业启动到 CDH 集群时，该作业被终止，当我看到容器的日志时，我看到以下错误
Log Type: stderr
Log Upload Time: Wed Apr 05 10:56:13 +0530 2017
Log Length: 87
Error: Could not find or load main class org.apache.spark.deploy.yarn.ExecutorLauncher
Log Type: stdout
Log Upload Time: Wed Apr 05 10:56:13 +0530 2017
Log Length: 0
请帮我解决这个问题。
提前致谢
我通过在 spark 上下文创建代码中添加 yarn 的类路径解决了这个问题