问题标签 [apache-zeppelin]

在“ Zeppelin 教程”笔记本中，我不能使用%sql 解释器。它将输出“ sql interpreter not found”。但是 spark 命令工作正常，%md以及%sh.

这是日志：

错误 [2015-10-20 10:13:35,045] ({qtp885851948-51} NotebookServer.java[runParagraph]:615) - 运行 org.apache.zeppelin.interpreter.InterpreterException 出现异常：在 org.apache 找不到 sql 解释器.zeppelin.notebook.NoteInterpreterLoader.get(NoteInterpreterLoader.java:148) at org.apache.zeppelin.notebook.Note.run(Note.java:282) at org.apache.zeppelin.socket.NotebookServer.runParagraph(NotebookServer.java :613) 在 org.apache.zeppelin.socket.NotebookSocket.onMessage(NotebookSocket.java:56) 在 org.eclipse.jetty.websocket 的 org.apache.zeppelin.socket.NotebookServer.onMessage(NotebookServer.java:126)。 WebSocketConnectionRFC6455$WSFrameHandler.onFrame(WebSocketConnectionRFC6455.java:835) at org.eclipse.jetty.websocket.WebSocketParserRFC6455.parseNext(WebSocketParserRFC6455.java:349) 在 org.eclipse.jetty.io.nio.SelectChannelEndPoint.handle(SelectChannelEndPoint.java:667) 在 org.eclipse.jetty 在 org.eclipse.jetty.websocket.WebSocketConnectionRFC6455.handle(WebSocketConnectionRFC6455.java:225) .io.nio.SelectChannelEndPoint$1.run(SelectChannelEndPoint.java:52) at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:608) at org.eclipse.jetty.util.thread.QueuedThreadPool$3 .run(QueuedThreadPool.java:543) 在 java.lang.Thread.run(Thread.java:745)java:52) 在 org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:608) 在 org.eclipse.jetty.util.thread.QueuedThreadPool$3.run(QueuedThreadPool.java:543) 在 java. lang.Thread.run(Thread.java:745)java:52) 在 org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:608) 在 org.eclipse.jetty.util.thread.QueuedThreadPool$3.run(QueuedThreadPool.java:543) 在 java. lang.Thread.run(Thread.java:745)

它与 spark yarn-client 一起运行良好，但是 yarn-cluster 呢？如果可能的话，请分享我们如何做到这一点。

我的配置如下：

在从 github 成功克隆并使用以下命令后，我正在尝试安装 Apache Zeppelin

尽管进行了几次尝试，但在取得了一些初步成功后，我收到了以下错误：

[错误] 无法在项目 zeppelin-web 上执行目标 com.github.eirslett:frontend-maven-plugin:0.0.23:grunt (grunt build)：无法运行任务：'grunt --no-color' 失败。（错误代码 3）-> [帮助 1]

任何帮助将不胜感激。提前致谢

问候，

纳文泽维尔

我目前正在使用 Apache Zeppelin 做一些数据可视化的东西，只是好奇为什么没有人为 R 提供解释器。从文档看来，创建一个新的解释器应该不会太难，但如果它真的这么简单，应该已经有各种语言的口译员了，我错了吗？

• 使用平台：Apache Zeppelin
• 语言：scala, javascript

我使用 d3js 读取大小约为 40MB 的 csv 文件，它与以下代码完美配合：

现在，想法是避免使用 d3js，而是在 scala 中构造 JSONarray，并通过 z.angularBind() 在 javascript 代码中访问此变量。下面的两个代码都适用于较小的文件，但是对于大小为 40MB 的 CSV 文件会出现 java 堆空间错误。我无法理解的是，当 d3.csv() 可以完美地完成工作而没有任何堆空间错误时，为什么下面的这 2 个代码不能？

编辑代码 1：使用 scala 的

编辑代码 2： 我认为如果我使用 Apache spark 像下面的代码那样构造 JSON 数组，堆空间问​​题可能会消失，但这也给出了堆空间错误：

当尝试从 Zeppelin 中的 Spark 写入 HDFS 时，我收到以下ClassNotFoundException信息org.apache.hadoop.mapred.DirectFileOutputCommitter：

试图运行的代码：

在搜索这个类时，我什至找不到它。我能找到的最接近的是Hadoop 中的 org.apache.hadoop.mapred.FileOutputCommitter。

我正在使用Zeppelin18c8c9ea512a0d87699a73e2ca26192d03748661的提交（10 月 9 日）、YARN 上的 Spark 1.5.0 和 Hadoop 2.6。

我正在运行以下命令：-spark 独立集群（预构建：http ://d3kbcqa49mib13.cloudfront.net/spark-1.5.1-bin-hadoop2.6.tgz ）-Zeppelin 0.5.0（标签：https:// /github.com/apache/incubator-zeppelin/releases/tag/v0.5.0）-Oracle JDK 8u66

我可以从任何 spark 集群机器启动 spark shell。

我已经按如下方式安装了 Zeppelin（https://zeppelin.incubator.apache.org/docs/install/install.html）：

我已经配置zeppelin-env.sh如下：

请注意，SPARK_HOME 与 spark 集群节点上可用的 spark 版本相同。

现在我创建我的第一个注释并测试与我运行的集群的连接：

我收到以下错误

有谁知道我做错了什么？

在我的 zeppelin-env.sh 中，我将 JDBC MySQL 连接器加载为 jar，如下所示

此外，我想加载应该以 2（或更多）方式工作的 Databricks CSV 包：

1. %dep z.load("com.databricks:spark-csv_2.10:1.2.0")
2. export SPARK_SUBMIT_OPTIONS="--packages com.databricks:spark-csv_2.10:1.2.0"

第一个在设置no SPARK_HOME时工作，但仅在设置外部 Spark home时才SPARK_SUBMIT_OPTIONS考虑。

如何在不设置的情况下加载 databricks CSV 包，或者如何在不设置的情况下加载使用嵌入式 Spark 库时包含的所有其他 jar ？SPARK_HOMESPARK_HOME

实际上，我更喜欢使用可以独立于 Zeppelin 进行更新的单独 Spark 安装，但是我担心在坚持使用嵌入式 Spark 时不会出现不兼容问题。

我希望 Zeppelin 使用几个附加参数（--total-executor-cores 200 --executor-memory 20g --driver-memory 5g）启动 Spark 我正在尝试通过 Zeppelin UI 将这些参数添加到 spark 解释器。我单击编辑按钮并添加这三个参数，但是当我单击保存时它们消失了，我可以看到我的 Spark 是由 Zeppelin 启动的，没有这些参数。

你能给我一个提示，我怎样才能让 Zeppelin 使用其他参数启动 Spark？

我是齐柏林飞艇的初学者。今天我尝试使用命令在我的计算机上安装 zeppelin：

mvn clean install -Pspark-1.5.1 -Dhadoop.version=2.3.0-cdh5.0.2 -Phadoop-2.3 -DskipTests

我收到“业力：单元”测试未通过的错误，因此我在“ ”文件中将“ --force”添加到 grunt 的 maven 目标中。zeppelin-web/pom.xml之后，我确实通过了 mvn install 命令，结果如下。</p>

但是，当我访问 zeppelin-web 的索引页面时，我得到了一个空白页面，其中包含一些 javascript 错误。它通过浏览器开发者工具的控制台显示错误：

当我在其他计算机上尝试相同的操作时，出现以下错误：

我想尽一切办法解决它，但对前端技能知之甚少，我不知道该怎么做。有人可以帮我吗？非常感谢。

以下是 mvn 结果：