google-cloud-dataflow - 任何人都可以将 Google 提供的 PubSub 的元数据文件提供给 BigQuery 模板吗？

Question

实际上，我必须制作自定义模板，其工作方式与 Google 向 BigQuery 模板提供的 PubSub 类似，但我对此模板的元数据文件一无所知，因此任何人都可以为这个预构建的模板提供元文件？

Answer 1

The desired template metadata is in the Google Cloud Storage (GCS) bucket found here [1] by adding “_metadata” at the end:

gs://dataflow-templates/latest/PubSub_to_BigQuery_metadata

For downloading the file from that GCS bucket you can use “gsutil cp” command [2].

Also, you can follow this documentation for creating templates [3].