apache-spark - Apache Zeppelin 使用哪种协议连接到 Apache Spark？（iPython/ZeroMQ）？

Question

我想知道 Apache Zeppelin 使用哪个协议连接到 Apache Spark？

它也是 ZeroMQ 上的 iPython 协议吗？

非常感谢！

此致

罗密欧

Answer 1

Spark Interpreter for Apache Zeppelin (incubating) 实际上都没有使用它们。

它只是在 spark 解释器进程中托管 Spark Driver，并通过SparkIMain提交每个段落的作业，与 spark-shell 的方式相同。

我相信 Driver 和 Master 之间的内部低级通信是基于 Akka 的，但它是特定于 Spark 的实现细节。