1

我在 HDP 3.1.4 上使用 Spark 3.0.1。除了 Spark SQL 无法遵守 Ranger 标准 SQL 策略之外,一切都运行良好。

这几天,我尝试了从社区找到的解决方案,hive仓库连接器和spark-authorizer和spark-llap。不幸的是我无法解决它。似乎代码没有维护,最新版本不支持 Spark 3.0。我看到很多人也在这个问题上苦苦挣扎。

有什么建议让 Spark SQL 采用 Ranger 列/行级别的权限策略吗?任何想法表示赞赏。谢谢你。

  1. hive 仓库连接器,它适用于 spark 2.3.1,但不适用于 3.0。
  2. spark-authorizer、spark-llap 都是版本不兼容错误。

版本为 Spark 3.0.1、HDP 3.1.1、Hive 3.1.0、Ranger 1.2.0

4

0 回答 0