如何在 Scrapy (python) 中设置线程池大小?
问问题
3194 次
1 回答
5
由于 Scrapy 不使用多线程,而是使用称为Twisted的底层异步 http 框架,您一定是在谈论一次可以运行多少个蜘蛛?请参阅CONCURRENT_REQUESTS文档。 默认值:16
于 2013-04-06T19:33:40.060 回答