python - 如何在 Python 中使用网站的用户名和密码进行网页抓取

Question

嗨，我正在使用此代码从timeanddate.com站点获取数据。但我需要使用我的用户名和密码为我的 Facebook 帐户做同样的事情，并抓取我墙上的评论并将其写入文本文件。我可以用 python 做到这一点吗？怎么做？

import urllib2
from BeautifulSoup import BeautifulSoup


soup = BeautifulSoup(urllib2.urlopen('http://www.timeanddate.com/worldclock/astronomy.html?n=78').read())

for row in soup('table', {'class' : 'spad'})[0].tbody('tr'):
tds = row('td')
print tds[0].string, tds[1].string

谢谢....

Answer 1

使用请求 API。它也处理身份验证。