php - 使用 cURL/php 获取页面，但它缺少一些东西

Question

我需要从外部网站（使用不同的域）提取数据。我试图检索的大部分数据不会显示，除非用户在元素上进行交互（点击），或者如果设置了 cookie。

我试图将 curl 与 PHP 一起使用，但我对其他选项持开放态度。是否可以发出可以在请求期间处理 javascript 的编程 GET 请求？

根据有关此问题的帖子 curl 可以传递 cookie，但不会将结果行为发回，因为它不使用 js 处理返回数据。

通过 curl 设置 cookie

任何其他建议都非常感谢。

Answer 1

据我所知，使用可以从面向公众的网页检索经过 js 处理后的 HTML 输出的框架来抓取数据并没有多大用处，因此已经放弃了它的进展。如果我找到一个允许轻松检索的框架，我将更新这篇文章。