3

是否可以使用 wget 从特定 TLD 递归下载文件?

具体来说,我正在尝试下载马萨诸塞州法规的全文。法规的实际文本存储在跨多个域的多个文件中——所以我想从索引页面开始递归下载,但只遵循指向 .gov 和 .us 域的链接。

4

1 回答 1

4

在跨越主机的 wget 文档的帮助下,我能够使用 -H 和 -D 标志来完成这项工作:

wget -r -l5 -H -D.us,.gov http://www.lawlib.state.ma.us/source/mass/cmr/index.html
于 2012-05-15T13:53:15.183 回答