我想完全抓取一个包含所有资源(.css、.html、.favicon、.js 等)的网页
目前,我正在使用这个命令来做到这一点。
wget -E -H -k -K -e robots=off -p https://example.com -P ./myDir
但是,在某些页面上,下载的文件夹缺少文件。
例如,这是一个网站模板,没有 .html 文件。
wget -E -H -k -K -e robots=off -p https://nicepage.com/html-templates/preview/zero-waste-166766?device=desktop -P ./myDir
你知道抓取网页的更好方法吗?我正在使用 node.js,所以你也可以告诉我一些 node.js 包。