google-cloud-platform - 无法从 Dataproc sparkjob 访问 GCP Access Secret Manager

Question

我正在尝试从 dataproc spark 作业中获取 GCP 机密管理器机密。但我收到错误“线程“主”java.lang.NoClassDefFoundError：com/google/cloud/secretmanager/v1/AccessSecretVersionResponse 中的异常”。我在 dataproc spark 作业依赖项中添加了罐子“google-cloud-secretmanager-1.4.2.jar”和“gax-1.62.0.jar”。

我正在使用下面 GCP 链接中提到的代码。 https://cloud.google.com/secret-manager/docs/reference/libraries

我在这里错过了什么吗？

Answer 1

2.0-debian10 安装了 python >= 3.0。google-cloud-secretmanager-1.4.2.jar 不支持 python >= 3.0 ( https://pypi.org/project/google-cloud-secret-manager/1.0.0/ )。请使用更高版本的 google-cloud-secretmanager。