我已经在使用 urllib2 来使用代理获取页面,但是它花费的时间太长了,而且我知道使用代理需要更长的时间,但是如果我在 firefox 或 ie 中测试代理,仍然需要很长时间。
谢谢。
我已经在使用 urllib2 来使用代理获取页面,但是它花费的时间太长了,而且我知道使用代理需要更长的时间,但是如果我在 firefox 或 ie 中测试代理,仍然需要很长时间。
谢谢。
为了更快地下载页面,无论是否使用代理,您都需要同时执行此操作。尝试 gevent 库。有一个并发下载示例https://bitbucket.org/denis/gevent/src/tip/examples/concurrent_download.py