我正在使用request.js
并cheerio.js
抓取受密码保护的网站。
是否可以编辑响应 uri,以便我可以抓取除我被重定向到的页面之外的另一个页面?
我正在使用request.js
并cheerio.js
抓取受密码保护的网站。
是否可以编辑响应 uri,以便我可以抓取除我被重定向到的页面之外的另一个页面?
您应该考虑tough-cookie
结合使用request.js
.
这应该允许您创建一个cookie-jar
将您的会话存储在受密码保护的网站上,并且您可以继续请求其他页面,同时仍然显示已登录。
用法(来自request.js
示例):
var request = request.defaults({jar: true})