apache-spark - 如何在 HiveThriftServer2 中注册自定义 UDF jar？

Question

在 HiveThriftServer2 类中，调用startWithContext与调用main有什么区别？

我有一个要注册的客户 UDF jar，这样每次 thrift 服务器启动时，所有这些都是自动配置的。有没有办法做到这一点？

我可以使用 Hive 上下文来注册 UDF jar 和函数并调用 HiveThriftServer2.startWithContext 来启动服务器吗？

谢谢

score 2 · Accepted Answer

您要查找的内容称为hive.aux.jars.path，它是 Hive 属性，而不是特定于 Spark 的。

我个人没有尝试过，但我在想这样的事情

./sbin/start-thriftserver.sh \
  --hiveconf hive.aux.jars.path=file:///opt/lib/custom-udfs.jar

参考

1 回答 1