1

对于我们试图通过 Spark 作业处理数百万条记录的应用程序,默认设置为 600 req/min 的速率限制非常低。即使有 16 个节点和 4 个核心的集群,我们也达到了速率限制。我们计划让 25 个这样的作业并行运行。您能否建议如何将速率限制提高到每分钟 20k

4

2 回答 2

2

根据这个官方 GCP 文档

您可以通过从 Google Cloud Dashboard 的配额页面中选择编辑配额来将配额编辑为最大值。要请求增加配额,请使用您请求的增加和理由编辑您的配额并提交您的更新。收到您的请求后,您会收到通知。可能会与您联系以获取有关您的请求的更多信息。审核您的请求后,系统会通知您该请求是被批准还是被拒绝。

于 2022-02-04T20:13:16.270 回答
2

https://cloud.google.com/docs/quota是 Google Cloud 配额的源文档。

提交配额请求后,我们将向您发送一些后续问题,以帮助我们计算授予配额的容量需求,因此请留意该电子邮件。

于 2022-02-04T23:22:05.413 回答