11

我从 Spark 存储库中提取了最新的源代码并在本地构建。spark-shell它在像or的交互式 shell 中工作得很好spark-sql。

现在我想根据这个安装手册将 Zeppelin 连接到我的 Spark 1.5 。我将自定义 Spark 构建发布到本地 maven 存储库，并在 Zeppelin 构建命令中设置自定义 Spark 版本。构建过程成功完成，但是当我尝试在笔记本内部运行基本的东西时sc，它会抛出：

akka.ConfigurationException：Akka JAR 版本 [2.3.11] 与提供的配置版本 [2.3.4] 不匹配

版本 2.3.4 设置在pom.xmland中spark/pom.xml，但简单地更改它们甚至不会让我获得构建。

如果我用标准重建 Zeppelin -Dspark.vesion=1.4.1，一切正常。

4

1 回答 1

8

更新 2016-01

Spark 1.6 支持已掌握并在-Pspark-1.6配置文件下可用。

2015-09 更新

Spark 1.5 支持已掌握并在-Pspark-1.5配置文件下可用。

在 Apache Zeppelin（孵化）中支持 Spark 1.5 的工作是在这个 PR apache/incubator-zeppelin#269下完成的，它将很快借给 master。

目前，从Spark_1.5分支构建-Pspark-1.5应该可以解决问题。

于 2015-09-03T04:05:47.620 回答