python - Scrapyd：如何设置scrapyd任务优先级？

Question

我有几个scrapy项目。我用scrapyd部署所有这些。一些蜘蛛很慢，而另一些则很快。现在，我想先运行快速蜘蛛。怎么做？

Answer 1

我遇到了同样的问题。但是我阅读了源代码，scrapyd似乎scrapyd可以处理它。但是，这没有记录。

您需要添加一个以priority所需值命名的参数。默认优先级为 0。

例如：

curl http://localhost:6800/schedule.json -d project=myproject -d spider=somespider -d priority=1