presto - Prestosql如何查询不同S3兼容的对象存储

Question

背景

当通过和遵循 prestosql 指南Amazon S3 配置 - Hive 连接器s3a://将 URI 前缀与具有单个 HMAC 密钥对的 S3 配置一起使用时，prestosql 可以很好地处理 S3 和 S3 兼容对象存储（例如，IBM 云对象存储）上的数据。hive.s3.aws-access-keyhive.s3.aws-secret-key

问题

当数据在两个云帐户的两个不同存储桶中提供时，这意味着客户端必须使用两个不同的 HMAC 密钥对来访问对象。这是否意味着它必须通过 prestosql 中的 hive 连接器配置两个目录？

这在使用 IBM 云时很常见，其中对象存储服务作为不同云帐户的实例进行管理。

Answer 1

是的，您需要配置两个单独的配置单元目录。

或者，您可以使用客户端提供的额外凭据（GCS 现在支持此功能，但可以轻松扩展为与 S3 兼容）。