google-cloud-dataflow - 如何将我的 Dataflow 工作器日志导出到 Cloud Pubsub？

Question

我想对来自 Cloud Dataflow 的工作人员日志进行一些二次处理。有没有简单的方法可以做到这一点？

Answer 1

这可以通过配置从 Cloud Logging导出的日志来完成。

首先，导航到Cloud Logging UI 中的Exports表：

在“导出”页面上，执行以下步骤：

1. 选择数据流服务。
2. 取消选择所有来源。
3. 单击添加项目并选择dataflow.googleapis.com/worker。
4. 选择要发布到的 Pubsub 主题。