18

我正在尝试使用带有 WGET 的批处理文件从此处下载公共 FCC 文件

http://wireless.fcc.gov/uls/data/complete/l_micro.zip

当我最初使用参数运行批处理文件时

wget --server-response -owget.log http://wireless.fcc.gov/uls/data/complete/l_micro.zip

它失败并出现 HTTP 401 未经授权的错误。我可以在这一点上重试，但它一直失败。但是我注意到如果我打开 IE，开始下载并在提示保存时取消，我可以重新运行批处理文件并且它完美执行！

这是我从日志中获得的详细服务器响应

--2012-02-06 14:32:24--  http://wireless.fcc.gov/uls/data/complete/l_micro.zip
Resolving wireless.fcc.gov (wireless.fcc.gov)... 192.104.54.158
Connecting to wireless.fcc.gov (wireless.fcc.gov)|192.104.54.158|:80... connected.
HTTP request sent, awaiting response... 
  HTTP/1.1 302 Found
  Location: REMOVED - appears to have my IP
  Cache-Control: no-cache
  Pragma: no-cache
  Content-Type: text/html; charset=utf-8
  Connection: close
  Content-Length: 513
Location: REMOVED [following]
--2012-02-06 14:32:24--  REMOVED
Resolving REMOVED... 192.168.2.11
Connecting to REMOVED|192.168.2.11|:80... connected.
HTTP request sent, awaiting response... 
  HTTP/1.1 401 Unauthorized
  Cache-Control: no-cache
  Pragma: no-cache
  WWW-Authenticate: NTLM
  WWW-Authenticate: BASIC realm="AD_BCAAA"
  Content-Type: text/html; charset=utf-8
  Proxy-Connection: close
  Set-Cookie: BCSI-CS-8ECFB6B4AA642EF0=2; Path=/
  Connection: close
  Content-Length: 575
Authorization failed.

这是完成我的小 IE 程序并让它工作后的日志

--2012-02-08 15:52:43--  http://wireless.fcc.gov/uls/data/complete/l_micro.zip
Resolving wireless.fcc.gov (wireless.fcc.gov)... 192.104.54.158
Connecting to wireless.fcc.gov (wireless.fcc.gov)|192.104.54.158|:80... connected.
HTTP request sent, awaiting response... 
  HTTP/1.1 200 OK
  Server: Sun-Java-System-Web-Server/7.0
  Date: Fri, 27 Jan 2012 18:37:51 GMT
  Content-type: application/zip
  Last-modified: Sun, 22 Jan 2012 11:18:09 GMT
  Etag: "46fa95c-4f1bf071"
  Accept-ranges: bytes
  Content-length: 74426716
  Connection: Keep-Alive
  Age: 1045014
Length: 74426716 (71M) [application/zip]
Saving to: `l_micro.zip'

任何帮助表示赞赏！

4

7 回答 7

38

如果网站只有一个 htpassword 设置，您可以尝试：

wget --user=admin --ask-password https://www.yourwebsite.com/file.zip
于 2013-03-20T04:10:43.443 回答
11

我使用--auth-no-challenge并解决了确切的错误。

于 2015-07-30T11:41:21.970 回答
9

您的网络上有一个Blue Coat安全 Web 网关，响应中的行证明了这一点：

Set-Cookie: BCSI-CS-8ECFB6B4AA642EF0=2; Path=/

看起来它希望您进行身份验证，大概是使用您的域凭据。尝试使用--http-userand传递它们--http-passwd。

于 2012-02-09T18:05:15.000 回答
5

我对基于 xwiki 的站点也有类似的问题。经过几次尝试后，我发现了一些对我有用的组合

wget --no-check-certificate --auth-no-challenge -k -nc -p -l 1 -r https://user:password@host.domain

我认为关键是 --auth-no-challenge

于 2014-04-19T23:58:52.150 回答
2

尝试将此扩展用于 Firefox。它生成一个wget或一个curl可以从 bash 复制和运行的命令。

于 2018-07-17T11:26:37.090 回答
1

我来到这里试图找出为什么 wget 在另一个系统上没有出现问题时给出 401 未经授权的消息。

从源代码安装更高版本的 wget 后（二进制文件在我的发行版中不可用）它起作用了。我无法解释原因，除非它一定是某种错误，所以如果以上都不能解决您的问题，请考虑升级 wget。

于 2017-03-13T18:32:03.410 回答
0

尝试使用 wget 设置用户代理字符串 - 例如

--user-agent=Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)

站点拒绝来自某些用户代理的请求是完全可行的，特别是如果他们希望绕过“通常”的信息路径（即通过网页）。

尽管这不能解释您的问题，但无论如何这是一个好主意。也许该站点实现了一种机制，当您使用“已知”浏览器（例如 IE）浏览时，它会将您的 IP 缓存为“安全”，然后允许任何用户代理从您的 IP 下载任何内容:)

于 2012-02-09T00:35:36.650 回答