1

我正在尝试部署一个集群并在其上运行一些示例 Spark/scala 代码,虽然当我在具有默认参数的独立模式下使用 zeppelin 时一切正常,但我无法让它在集群模式下工作。我尝试在 spark 中使用spark-classstart-master标准 shell 文件手动创建 spark 集群,然后将spark://.. URL 传递给 Zeppelin,但是在运行代码后,我不断收到不同的奇异错误(如 java sys. process._ library 丢失),一段时间后,spark 工作人员的状态在 Spark MasterUI 中变为 DEAD

我还尝试在 zeppelin spark.home 变量中放置yarn-client而不是 spark-URL,但它没有产生类似的错误。

您能否帮我在 Ambari 集群上部署 zeppelin 和/或提示我做错了什么?

4

1 回答 1

1

对于 Zeppelin 与 Ambari 的集成,请使用 Hortonworks 的这个ambari-zeppelin-service

它有据可查,并且也可以在集群模式下工作。

于 2015-09-07T03:49:59.207 回答