1

我在我的 Scrapy-Selenium Crawler 中使用Crawlera 。

但我只需要使用来自法国的 IP 。

如何配置我的 crawlera 来做到这一点。

   custom_settings = {
        'DOWNLOADER_MIDDLEWARES' : {'scrapy_crawlera.CrawleraMiddleware': 600},
        'CRAWLERA_ENABLED' : True,
        'CRAWLERA_APIKEY' : //my appikey,
        'DOWNLOAD_DELAY' : 0,
        'COOKIES_ENABLED' : True,
    }
4

1 回答 1

2

您必须访问http://app.scrapinghub.com上的 Crawlera 仪表板并创建一个单独的用户,将“fr”设置为区域。然后,您在蜘蛛程序中使用新的 API 密钥。

于 2016-07-13T14:52:58.253 回答