scrapy - 通过 Scrapy-Splash 返回图像内容

Question

我正在使用 Scrapy-Splash 请求来获取页面的渲染屏幕截图，但我还需要该页面上的图像。我使用管道下载这些图像，但我在想 - 这不会对同一个图像提出两个请求吗？一次是在 Splash 呈现页面时，一次是在我发送下载请求时。有没有办法获得 Scrapy-Splash 请求返回的图像？

Answer 1

您可以启用响应主体（使用respone_body参数 或splash.response_body_enabled=True），然后从 HAR 导出中提取图像。