scala - 使用 AWS Glue Scala 查询 Athena（添加分区）

Question

是否有可能从使用 Scala 的 Glue Script 查询数据以在 Athena 的现有表中更改 TABLE ADD PARTITION？

以及从 aws.athena.connections (OR) 扩展的可能库

使用 spark 查询要从（Glue 数据目录）添加的 Athena 表？

Answer 1

您可以通过查询调用 AthenaALTER TABLE ADD PARTITION或通过 Glue API 添加分区。但是，Glue 应该已经为您提供了 AWS 开发工具包，以便您可以使用适当的Athena或Glue客户端类。

如果您的作业在自定义 VPC 中运行，请确保可以访问 AWS 服务。