python - scrapyd pool_intervel 调度蜘蛛

Question

我想让我的蜘蛛每三个小时启动一次。

我有一个位于c:/scrapyd文件夹中的scrapy confinguration 文件。

我改变poll_interval了100

蜘蛛工作，但它没有每 100 秒重复一次。

请问该怎么做？

Answer 1

也许你应该做一个每三个小时执行一次的 cron 作业，并对 Scrapyd 执行 curl 调用来安排作业。