我想使用 AWS Glue 数据目录作为 Spark SQL 的元存储。我已经按照此处的说明通过 AWS 控制台启动了 EMR 集群。
我可以从 spark-shell 中看到所有 Glue 目录表,但不能从 Zeppelin 中看到。
Zeppelin 属性配置中是否需要设置任何属性?
提前致谢。
我想使用 AWS Glue 数据目录作为 Spark SQL 的元存储。我已经按照此处的说明通过 AWS 控制台启动了 EMR 集群。
我可以从 spark-shell 中看到所有 Glue 目录表,但不能从 Zeppelin 中看到。
Zeppelin 属性配置中是否需要设置任何属性?
提前致谢。
EMR 5.9.0 刚刚发布(仅 9 小时后!) - 它应该适合您。
相关文件:
http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-release-components.html
http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-glue.html