我使用数据流服务运行我的工作以从 GCS 读取数据并写入 BQ 表,工作成功运行,我想知道如何或在哪里可以找到谷歌为我的工作设置了多少虚拟机的信息?
谢谢你。
我使用数据流服务运行我的工作以从 GCS 读取数据并写入 BQ 表,工作成功运行,我想知道如何或在哪里可以找到谷歌为我的工作设置了多少虚拟机的信息?
谢谢你。
使用 运行 Cloud Dataflow 流水线时[Blocking]DataflowPipelineRunner
,工作器虚拟机的默认数量为 3。
--numWorkers
可以使用参数在命令行上覆盖此值。
所有虚拟机,包括由 Cloud Dataflow 创建的虚拟机,都可以在Google Developers Console的以下部分中看到:计算、计算引擎、VM 实例。