1

我正在 Google Data Fusion 中创建一个管道,允许我使用我的 bing-ads 开发人员令牌将我的 bing-ads 数据导出到 Bigquery。我在数据融合中找不到任何应该添加到我的管道中的数据源。Google Data Fusion 是否支持从 API 调用中获取数据,如果支持,如何实现?

4

1 回答 1

1

Cloud Data Fusion 基于 HTTP 的源目前正在开发中,将于第三季度发布。您能否再详细说明一下您的用例,以便我们确保这些插件能够满足您的需求?例如,您是否希望构建批处理或实时管道?

同时,您有以下两个更直接的选项/解决方法:

  1. 如果您可以在将数据加载到 BigQuery 之前将数据存储在 GCS 的暂存区域中,则可以使用 Hub 中提供的 HTTPToHDFS 插件。使用以 gs:///path/to/file 开头的路径
  2. 或者,我们也欢迎贡献,因此您也可以使用 Cloud Data Fusion API 构建插件。我们很乐意为您提供指导,并可以为您提供文档和示例。
于 2019-05-09T22:16:13.457 回答