谁能帮我提供一些关于我们如何在基于 Google BigQuery 构建的 DW 类型解决方案上实现数据沿袭的指示，使用 Google Cloud 存储作为源，Google Cloud Composer 作为工作流管理器来实现一系列 SQL？
问问题
645 次
1 回答
0
如果您在 Cloud Storage 中有数据，您可能希望使用GoogleCloudStorageToBigQueryOperator之类的工具首先将数据加载到 Bigquery 中，然后使用BigQueryOperator运行查询。
然后你可以看到你的不同 DAG、任务等在 Composer 内的 Airflow Web UI 中是如何运行的。
于 2018-10-18T12:30:25.627 回答