Spark - 本地独立模式不会写入历史服务器
Spark - local standalone mode won't write to history server
我正在尝试在 Mac 上以单一独立模式启用 Spark 历史服务器。我有一个 spark-master 服务 运行ning 并且能够 运行 工作。我在本地主机上也有历史服务器服务 运行ning。我可以在我的浏览器中查看它，但上面没有任何应用程序的记录。我只能假设我错过了一些我不知道是什么的配置。有人可以建议如何配置历史服务器以使用本地独立 Spark 吗？
这是我的配置：
# spark.master spark://master:7077
spark.eventLog.enabled true
# spark.eventLog.dir hdfs://namenode:8021/directory
# spark.serializer org.apache.spark.serializer.KryoSerializer
# spark.driver.memory 5g
# spark.executor.extraJavaOptions -XX:+PrintGCDetails -Dkey=value -Dnumbers="one two three"
目录 spark-events 拼写错误。我有火花事件。重命名后，我就可以查看作业日志了。
我正在尝试在 Mac 上以单一独立模式启用 Spark 历史服务器。我有一个 spark-master 服务 运行ning 并且能够 运行 工作。我在本地主机上也有历史服务器服务 运行ning。我可以在我的浏览器中查看它，但上面没有任何应用程序的记录。我只能假设我错过了一些我不知道是什么的配置。有人可以建议如何配置历史服务器以使用本地独立 Spark 吗？
这是我的配置：
# spark.master spark://master:7077
spark.eventLog.enabled true
# spark.eventLog.dir hdfs://namenode:8021/directory
# spark.serializer org.apache.spark.serializer.KryoSerializer
# spark.driver.memory 5g
# spark.executor.extraJavaOptions -XX:+PrintGCDetails -Dkey=value -Dnumbers="one two three"
目录 spark-events 拼写错误。我有火花事件。重命名后，我就可以查看作业日志了。