3

我们的数据管道设置目前使用在 EC2 实例上运行的 Docker 容器和 Apache Airflow 作为编排工具。我们正在尝试迁移到 MWAA，以获得与托管服务相关的优势（可扩展性、维护、调度程序监控等......）。我的问题是将 Docker 与 MWAA 集成的最佳方式是什么？目前我们通过 Airflow 上的 DockerOperator 运行我们的服务/应用程序。我们是否需要让 Docker 在 MWAA 环境中运行？任何建议，将不胜感激。

4

1 回答 1

5

我建议继续使用 ECS 或 ECS Fargate 并在那里运行您的 Docker 容器。

MWAA 支持与 Fargate 和其他服务的开源集成，因此可以轻松与 Airflow 集成以进行编排

于 2021-02-22T14:27:47.730 回答