我们正在尝试在我们的 nodejs 项目中使用 AWS Glue 进行 ETL 操作。工作流程如下
- 用户上传 csv 文件
- 从 XYZ 格式到 ABC 格式的数据转换（映射和更改字段名称）
- 将转换后的 csv 文件下载到本地系统
请注意，此流程应以编程方式发生（创建爬虫、作业触发器应以编程方式完成，而不是使用控制台）。我不知道为什么文档和其他文章总是展示如何创建爬虫，从胶水控制台创建作业？
我相信我们必须创建 lambda 函数和触发器。但不太确定如何实现这种端到端流程。谁能帮帮我吗。谢谢
问问题
371 次