我需要从网站上收集用户的个人资料照片。我知道python和django,但不知道我该怎么做。
有人可以指导我如何制作 python 程序,以便我可以列出它只在他们的网站上说的网站,而不是任何外部链接,并检查该域中的每个页面。
编辑:假设我想在 stackoverflow 中收集用户的所有缩略图。前提是我们没有任何所有用户页面并通过。我想浏览所有问题页面,然后在那里抓取照片并使用用户 ID 保存到 hardidsk,这样我们就不会覆盖
我需要从网站上收集用户的个人资料照片。我知道python和django,但不知道我该怎么做。
有人可以指导我如何制作 python 程序,以便我可以列出它只在他们的网站上说的网站,而不是任何外部链接,并检查该域中的每个页面。
编辑:假设我想在 stackoverflow 中收集用户的所有缩略图。前提是我们没有任何所有用户页面并通过。我想浏览所有问题页面,然后在那里抓取照片并使用用户 ID 保存到 hardidsk,这样我们就不会覆盖
with open("some_png.png","wb") as f:
f.write(urllib2.urlopen("http://icons-search.com/img/yellowicon/TMNT_lin.zip/lin-png-256x256-Leonardo_256x256.png-256x256.png").read())
要找到您需要使用scrappy(或类似框架)的图像 url
有几个关于将它用作蜘蛛的教程(例如http://doc.scrapy.org/en/latest/intro/tutorial.html)