-3

如何在 Scrapy (python) 中设置线程池大小?

4

1 回答 1

5

由于 Scrapy 不使用多线程,而是使用称为Twisted的底层异步 http 框架,您一定是在谈论一次可以运行多少个蜘蛛?请参阅CONCURRENT_REQUESTS文档。 默认值:16

于 2013-04-06T19:33:40.060 回答