apache-toree - 如何在笔记本中启用 Hive 对 Spark 的支持？

Question

默认情况下，我得到预定义的火花会话对象（火花）。哪个未启用配置单元。如何获得启用蜂巢的火花会话？

Answer 1

我知道我迟到了回答你的这个问题。但我希望它对正在研究它的人有用。

如果 spark-defaults 文件没有设置 catalogImplementation 属性，则 Toree SQL 中的默认值将是本地元存储目录 (Derby)。您需要在集群的 spark-defaults.conf 文件中将此配置显式设置为 Hive，如下所示：

set spark.sql.catalogImplementation=hive

保存此文件中的更改后重新启动内核。