我已经使用 Portia UI 创建了一个蜘蛛，并且我已经使用 scrapyd 在我的一个虚拟机中进行了部署和调度。Spider 运行良好并抓取了网站内容。
但是当我尝试使用scrapyd在另一个类似的虚拟机中部署和调度同一个蜘蛛时，蜘蛛运行良好但没有抓取任何内容。
两台机器具有相似的配置、设置、软件包和版本。
可能的问题是什么？
编辑
我已经完成了以下操作
- 使用 docker 在我的机器中安装了所有 Portia 包
- 创建了一个蜘蛛（比如 myspider）
- 使用 scrapyd 部署并安排了该蜘蛛
- 从蜘蛛运行中提取了内容
- 克隆了机器并添加到另一个具有不同的网络ISP
- 部署了相同的蜘蛛（myspider）
- 蜘蛛运行良好，但网站内容未提取
- 我创建了一个具有不同 URL 的新蜘蛛，并且该蜘蛛正在正常抓取网站内容