4

我正在使用python的请求模块来尝试登录网页。我打开了一个 requests.session()，然后我得到了 cookie 和包含在元标记中的 csrf-token。我使用用户名、密码、隐藏的输入字段和来自元标记的 csrf-token 来构建我的有效负载。之后，我使用 post 方法，并通过登录 url、cookie、有效负载和标头。但在那之后我无法访问登录页面后面的页面。我究竟做错了什么？

这是我执行登录时的请求标头：

Request Headers:

:authority: www.die-staemme.de
:method: POST
:path: /page/auth
:scheme: https
accept: application/json, text/javascript, */*; q=0.01
accept-encoding: gzip, deflate, br
accept-language: de-DE,de;q=0.9,en-US;q=0.8,en;q=0.7
content-length: 50
content-type: application/x-www-form-urlencoded
cookie: cid=261197879; remember_optout=0; ref=start; 
PHPSESSID=3eb4f503f38bfda1c6f48b8f9036574a
origin: https://www.die-staemme.de
referer: https://www.die-staemme.de/
user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.77 Safari/537.36
x-csrf-token: 3c49b84153f91578285e0dc4f22491126c3dfecdabfbf144
x-requested-with: XMLHttpRequest

到目前为止，这是我的代码：

import requests
from bs4 import BeautifulSoup as bs
import lxml

# Page header
head= { 'Content-Type':'application/x-www-form-urlencoded',
'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'
}
# Start Page
url = 'https://www.die-staemme.de/'
# Login URL
login_url = 'https://www.die-staemme.de/page/auth'
# URL behind the login page
url2= 'https://de159.die-staemme.de/game.php?screen=overview&intro'

# Open up a session
s = requests.session()

# Open the login page
r = s.get(url)

# Get the csrf-token from meta tag
soup = bs(r.text,'lxml')
csrf_token = soup.select_one('meta[name="csrf-token"]')['content']

# Get the page cookie
cookie = r.cookies

# Set CSRF-Token
head['X-CSRF-Token'] = csrf_token
head['X-Requested-With'] = 'XMLHttpRequest'

# Build the login payload
payload = {
'username': '', #<-- your username
'password': '', #<-- your password
'remember':'1' 
}

# Try to login to the page
r = s.post(login_url, cookies=cookie, data=payload, headers=head)

# Try to get a page behind the login page
r = s.get(url2)

# Check if login was successful, if so there have to be an element with the id menu_row2
soup = bs(r.text, 'lxml')
element = soup.select('#menu_row2')
print(element)
4

1 回答 1

3

值得注意的是，在使用 Python 请求模块时，您的请求与标准用户请求并不完全相同。为了完全模拟真实的请求，从而不被任何防火墙或站点的安全措施阻止，您需要复制所有 POST 参数、GET 参数和 finally 标头。

您可以使用Burp Suite之类的工具来拦截登录请求。复制它发送到的 URL，也复制所有 POST 参数，最后复制所有标头。您应该使用该requests.Session()功能来存储 cookie。您可能还希望对主页进行初始会话 GET 请求以获取 cookie，因为用户在不首先访问主页的情况下发送登录请求是不现实的。

我希望这是有道理的，可以像这样传递标头参数：

import requests

headers = {
    'User-Agent': 'My User Agent (copy your real one for a realistic request).'
}

data = {
    'username': 'John',
    'password': 'Doe'
}

s = requests.Session()
s.get("https://mywebsite.com/")
s.post("https://mywebsite.com/", data=data, headers=headers)
于 2018-10-30T13:14:50.027 回答