vba - 当我提取的数据与浏览器中的“视图源”不同时，如何从网站中提取源代码？

Question

我正在从一个基于众筹音乐的网站上抓取数据。用于研究目的。我特别想在网站上获取“摇滚”类型项目的数据，但是当我使用网络爬虫获取源代码时，它与我在浏览器上“查看源代码”时看到的不同在分析网站时，我需要的数据无处可寻。

我已经检查了该网站并试图确定数据的来源，但没有成功。这是抓取网站时的常见问题吗？

我使用的网络爬虫是用VBA编写的，并且已经用于从其他网站抓取数据，这是我第一次遇到这样的事情。

Answer 1

您尝试访问的数据必须是从该页面上的 JavaScript 生成的，这就是您无法在视图源中看到它的原因。为了使其成为反检查，在 chrome 中您可以执行“检查”，然后转到查看源代码。比较同一页面的数据，JavaScript生成的数据会在inspect窗口中，而不是在view source中。