我正在尝试抓取一个似乎以某种方式从 js 生成 cookie 的网站,因此我无法自动抓取。非常感谢任何帮助。
我正在使用 SQLLite 检查 Firefox 的 cookie,我看到 5 个 cookie。但是当我签入 Firefox Developer Tools Inspect 时,我看到每个请求中使用了 7 个 cookie。
事实证明,这 2 个 cookie 非常重要,除非我提供所有 cookie,否则网站不会响应我的 Python 爬虫。
这些 cookie 由 Incapsula - 一个安全的第三方应用程序创建,它们都是 incap_ses。
我的问题是?我可以在哪里访问这些 cookie,或者是否可以自己生成它们?我应该继续挖掘 js 文件以找到一些生成这些 cookie 的函数,还是没有意义?