0

我有一个相对较小的爬虫,它通过 urllib2 读取带有线程的网站。现在我有一个问题,我必须阅读数以千计的网页,ID 向上。它适用于某些网站,但其他网站给我错误,例如“此网站需要启用 JavaScript 和 Cookies”。有谁知道如何以最简单的方式解决这个问题?并且不会减慢我的爬虫速度.....

谢谢...

4

0 回答 0