-1

Google 对管道本身生成的数据流作业日志收费，我们不会从作业中生成任何日志，我们正在使用 python-apache 束通过 composer 运行数据流作业。

这没有任何意义，因为我们没有生成任何日志，而且我们没有太多关于如何关闭生成的日志并将其摄取到云日志记录的信息。

我们收到的 Google 邮件

我们写信提醒您，从 2021 年 10 月 12 日开始，您的 Dataflow 应用程序生成的日志（并被提取并存储在 Google Cloud Logging 中）将按标准 Cloud Logging 价格收费。您仍将收到每个项目每月 50 GB 总（跨所有日志卷）摄取日志的免费层级。这是我们在 2021 年 7 月 12 日发送的通信的后续行动。

我需要做什么？

我们建议您在 2021 年 10 月 12 日之前通过执行以下步骤来检查 Cloud Logging 中 Dataflow 作业日志记录的使用情况：使用 Cloud Monitoring 中的 Metrics Explorer 查看您的使用情况指标。将您在上一步中使用的图表保存到 Stackdriver Monitoring 信息中心或使用数据流使用开源信息中心模板。有关优化 Dataflow 作业的日志量的信息，请参阅控制 Dataflow 日志量。

4

1 回答 1

0

查看来自 Dataflow 的 Cloud Logging 中注入的日志并搜索 LOG_ID，然后修改 _Default sink 以排除它们。

默认配置如下：

NOT LOG_ID("cloudaudit.googleapis.com/activity") AND NOT LOG_ID("externalaudit.googleapis.com/activity") AND NOT LOG_ID("cloudaudit.googleapis.com/system_event") AND NOT LOG_ID("externalaudit.googleapis. com/system_event") 而不是 LOG_ID("cloudaudit.googleapis.com/access_transparency") 而不是 LOG_ID("externalaudit.googleapis.com/access_transparency")

请参考文档

于 2021-10-25T09:05:23.987 回答