python - 尽管尺寸很大，但对于一长串 url 的请求失败

Question

我有一个形式的任务：

1)send an http get to url based on a parameter
2)Modify the response based on the same parameter
3)send an http post to url based on the same parameter

我曾经grequests做到这一点。55 urls现在它工作得很好。然后我尝试了。34000它失败了 Connection aborted.', gaierror(8, 'nodename nor servname provided, or not known')) for request <grequests.AsyncRequest object at 0x1bda93610>。

然后我尝试了size参数 ingrequests.map并尝试了size= 64。得到了同样的错误。现在还有什么我可以做的，或者我需要使用其他东西并且grequests不适合这项任务。