0

我正在使用scrapy从文章中获取评论。

例如，testPage在文章末尾有评论。

我如何能够访问这些评论？
看来scrapy下载的html不包含对评论的引用。

提前致谢。

4

1 回答 1

1

据我所知，scrapy 看到一个禁用 javascript 的网页，这些是 facebook 评论，即它们是通过该页面上的 javascript 提取的。

你可能想看看这里如何结合scrapy和htmlunit来用javascript抓取url

于 2012-07-28T18:55:56.110 回答