我正在尝试从 zillow 抓取房地产数据。我在devtool上看html代码的时候,大部分房屋详情的链接都没有在html代码中显示出来。而我们单击每个房屋卡片以获取相关房屋的详细信息。我在 devtool 的控制台中收到这些错误和警告:
我搜索了解决这些问题的解决方案,但我没有找到解决方法。禁用 JavaScript 源映射只会隐藏警告。我检查了 chrome 是否已更新。我正在使用 beautifulsoup 来抓取数据,并尝试将其与 selenium 结合使用。但我仍然得到 40 个房屋详细信息链接中的 31 个的空值。
如果您有任何可以提供帮助的想法,我提前感谢您。