0

我正在尝试在我的 Mac 上以单一独立模式启用 Spark 历史服务器。我有一个 spark-master 服务正在运行并且能够运行作业。我还有一个在 localhost 上运行的历史服务器服务。我可以在浏览器中查看它,但上面没有任何应用程序的记录。我只能假设我错过了一些我不知道是什么的配置。有人可以建议如何配置历史服务器以与本地独立 Spark 一起使用吗?

这是我的配置:

# spark.master spark://master:7077 
spark.eventLog.enabled true 
# spark.eventLog.dir hdfs://namenode:8021/directory 
# spark.serializer org.apache.spark.serializer.KryoSerializer 
# spark.driver.memory 5g 
# spark.executor.extraJavaOptions -XX:+PrintGCDetails -Dkey=value -Dnumbers="one two three"
4

1 回答 1

0

目录 spark-events 拼写错误。我有火花事件。一旦我重命名它,我就可以查看作业日志。

于 2018-01-22T08:56:30.167 回答