Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
我正在抓取一个网站,但它只在底部显示网站的一部分,它有一个查看更多按钮。无论如何可以通过python查看网页上的所有内容吗?
BeautifulSoup 只是解析返回的 HTML。它不执行 JavaScript,JavaScript 通常用于加载新内容或在加载后修改现有网页。
您需要执行 JavaScript,这不仅需要 HTML 解析器。您基本上需要使用浏览器。有几个 Python 包可以做到这一点: