0

我想从 Kinesis 将分段上传到我的 Amazon S3 存储桶。由于 Amazon S3 是一个文件系统,因此对于每个条目,它将在给定的存储桶名称下创建一个文件。

只要在 Amazon S3 的特定文件夹中有新文件,我的 Amazon S3 就会为 AWS 粘合作业提供数据,因为它会触发 Lambda 函数。对于流数据,每秒将有多个文件。

如何控制 Kinesis 端的文件大小,以便 Kinesis 仅在达到特定阈值后才将数据推送到 Amazon S3 存储桶上?所以每当我达到那个规模时,我就会触发我的工作。

4

1 回答 1

0

您可以使用AWS Glue 触发器而不是 lambda。

例如,为 Glue 设置一个 cron 时间。

于 2021-06-04T09:37:25.590 回答