1

我找到了一种使用 Python 保持登录网站的方法。问题是每隔一段时间,我就会断开连接并注销。我猜会话正在超时,但我不知道如何解决它。

我使用了 Firefox 的 Live HTTP Headers 附加组件,并将登录请求中的标头复制到我的程序中。

import urllib
import urllib2
import cookielib

data = urllib.urlencode({"inUserName":"MY EMAIL", "inUserPass":"MY PASSWORD"})
jar = cookielib.FileCookieJar("cookies")
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(jar))
opener.addheaders.append(('User-agent', 'Mozilla/5.0'))
opener.addheaders.append(('Referer', 'http://www.locationary.com/'))
opener.addheaders.append(('Cookie','site_version=REGULAR; __utma=47547066.601656247.1344371114.1344602507.1344606239.16; __utmz=47547066.1344371114.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none); nickname=jacob501; jforumUserId=1; locaCountry=1227; locaState=null; locaCity=Atlanta; PSESSIONID=533e2fb9fda008d5d16bfbdc9b9a6afed0e5ac54; Locacookie=enable; sortOrder=1; JSESSIONID=DE58AC8BC78D1DF20BF338E195336E58; __utmc=47547066; __utmb=47547066.6.10.1344606239'))
request = urllib2.Request("https://www.locationary.com/index.jsp?ACTION_TOKEN=tile_loginBar_jsp$JspView$LoginAction", data)
response = opener.open(request)
page = opener.open(url).read()
soup = BeautifulSoup(page)

我用cookieliburrlib/ urllib2。真正使它起作用的 cookie 是很长的,但我真的不知道这一切意味着什么,我只是从附加组件中复制了它。如果我的连接中断,我会转到我的浏览器并再次登录并从插件中获取一个新的 cookie。就像我之前说的,我猜它与 session 或 sessionid 或其他东西有关,但我不知道如何才能让我始终登录。

谢谢。

编辑

有人可以告诉我为什么这是一个坏问题还是我只是愚蠢?-1为了什么?

编辑 2

好的!如果我不保持登录状态,那么有没有办法让我的连接/cookie 不工作?

编辑 3

除了自己去 Firefox 插件外,我不知道如何获得新的 cookie ……哈哈

编辑 4

好的。我做了一个新的测试程序:

import urllib
import urllib2
import cookielib
import re

url = 'http://www.locationary.com/home/index2.jsp'

data = urllib.urlencode({"inUserName":"email", "inUserPass":"password"})
jar = cookielib.FileCookieJar("cookies")
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(jar))
opener.addheaders.append(('User-agent', 'Mozilla/5.0 (Windows NT 6.1; rv:13.0) Gecko/20100101 Firefox/13.0.1'))
opener.addheaders.append(('Referer', 'http://www.locationary.com/'))
opener.addheaders.append(('Cookie','site_version=REGULAR; __utma=47547066.601656247.1344371114.1344612897.1344615635.18; __utmz=47547066.1344371114.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none); nickname=jacob501; jforumUserId=1; locaCountry=1227; locaState=null; locaCity=Atlanta; PSESSIONID=533e2fb9fda008d5d16bfbdc9b9a6afed0e5ac54; Locacookie=enable; sortOrder=1; JSESSIONID=781FD0C497FB596954BB78B1323215F6; __utmc=47547066; __utmb=47547066.9.10.1344615635'))
request = urllib2.Request("https://www.locationary.com/index.jsp?ACTION_TOKEN=tile_loginBar_jsp$JspView$LoginAction", data)
response = opener.open(request)
page = opener.open(url).read()
print re.findall(r'<title>(.*)</title>', page)
h = response.info().headers
print h

输出:

['Home Page']
['Server: nginx/1.0.8\r\n', 'Date: Fri, 10 Aug 2012 16:50:47 GMT\r\n', 'Content-Type: text/html;charset=UTF-8\r\n', 'Transfer-Encoding: chunked\r\n', 'Connection: close\r\n', 'P3P: CP="IDC DSP COR ADM DEVi TAIi PSA PSD IVAi IVDi CONi HIS OUR IND CNT"\r\n']
4

2 回答 2

2

您为什么不尝试使用该requests模块并看看是否有所作为?

看看这里的例子;它非常易于使用,内置的 cookie jar 可能会有所帮助,如果只是为了防止您在 Python 的其他可悲的 HTTP 库中意外出错。

于 2012-08-10T17:36:02.277 回答
1

您可以使用 selenium,使用 Firefox 保持登录到此网页。

from selenium import selenium

localport = 12345

## you create a socket proxy here listening on localport
## connecting to www.locationary.com:80

selenium = selenium("localhost", 4444, 
                    "*firefox", "http://localhost:%i" % localport)

while 1:
    # open the selenium side every 5 minutes
    selenium.open("/home/index2.jsp")
    selenium.wait_for_page_to_load("30000")
    time.sleep(5 * 60) # seconds

要安装 selenium,您需要 python 包和 selenium 服务器 .jar 文件来启动它。

因为 firefox 通过您的程序登录,您可以解析有效会话 ID 的流量。

问题?

于 2012-08-11T21:13:03.580 回答