我检查了整个网络。但找不到解决方案。
我正在尝试使用 AWS EMR 中的捆绑包连接 astra cassandra,它能够下载捆绑包文件但不能加载它。
spark.conf.set("sparkdid.cassandra.connection.config.cloud.path", "secure-connect-app.zip")
这就是我给出路径的方式我知道这是错误的路径,因为它没有加载正确的配置,返回连接被 localhost 拒绝。
我不知道 EMR 中的正确路径是什么。
我检查了整个网络。但找不到解决方案。
我正在尝试使用 AWS EMR 中的捆绑包连接 astra cassandra,它能够下载捆绑包文件但不能加载它。
spark.conf.set("sparkdid.cassandra.connection.config.cloud.path", "secure-connect-app.zip")
这就是我给出路径的方式我知道这是错误的路径,因为它没有加载正确的配置,返回连接被 localhost 拒绝。
我不知道 EMR 中的正确路径是什么。
如果您查看文档,那么您会看到该文件可以指定为 S3 上文件的 URL,或者您可以在使用 spark-submit 或 spark-shell 提交时使用 --files 选项,那么它将仅作为文件可用名字,就像你在做的那样