并发数据流作业（不是核心）的数量是否有限制？我试图提交约 40 个小作业以并行运行，但在 7 个作业后开始出现 429 Rate Limit Exceeded 错误。
谢谢，G
问问题
894 次
2 回答
2
是的，每个项目的并发作业数量是有限制的。
在 alpha 中，我们目前支持 10 个并发作业。如果您希望在 Alpha 版期间提高此限制，请联系 dataflow-feedback [at] google [dot] com。
于 2015-01-21T17:04:28.410 回答
2
正如官方文档here中所述，
每个 Cloud Platform 项目最多可以运行25 个并发 Dataflow 作业。
Dataflow 服务目前仅限于处理大小为 10MB 或更小的作业请求。作业请求的大小专门与管道的 JSON 表示相关联；更大的管道意味着更大的请求。
于 2017-09-15T11:16:57.457 回答