google-cloud-platform - 用于 DataFlow 和 DataPrep 的 ZONE_RESOURCE_POOL_EXHAUSTED

Question

好的团队...Dataprep 遇到 BigQuery。我一生都无法找出过去 5 小时内出现 ZONE_RESOURCE_POOL_EXHAUSTED 问题的原因。前一天晚上，一切都很顺利，但今天，我遇到了一些严重的问题。

谁能提供有关如何更改与 Dataprep 相关的 Dataflow 作业的资源池的任何见解？我什至无法进行基本的列转换。

期待任何人帮助我解决这个问题，因为老实说，这个问题是其中之一“只要改变这个，也许这会解决它，如果没有，也许几个星期，它就会起作用”。

这是屏幕截图中的问题：https ://i.stack.imgur.com/Qi4Dg.png

更新：

我相信我的一些问题可能特别涉及GCP Compute 事件 18012，因为它是一个基于 us-central 的实例创建问题。

Answer 1

您提到的事件实际上已在 11 月 5 日解决，仅影响 us-central1-a 区域。看到您的问题是在 11 月 10 日发布的，并且评论中的其他用户在 us-central1-b 区域收到错误，该错误与您链接的事件无关。

正如错误消息所示，这是一个资源可用性问题。这些情况很少见，通常会很快得到解决。如果将来发生这种情况，在其他区域/地区使用 Compute Engine 实例将解决该问题。如评论中所述，要使用 Dataprep 执行此操作，从Dataprep启动作业后，您可以从Dataflow重新运行作业，同时指定要在其中运行作业的区域/区域。