2

我是 Python 新手，如果我遗漏了一些明显的东西，请原谅我。

我正在使用 urllib.FancyURLopener 来检索 Web 文档。在 Web 服务器上禁用身份验证时它可以正常工作，但在启用身份验证时会失败。

我的猜测是我需要继承 urllib.FancyURLopener 来覆盖 get_user_passwd() 和/或 prompt_user_passwd() 方法。所以我做了：

class my_opener (urllib.FancyURLopener):

    # Redefine
    def get_user_passwd(self, host, realm, clear_cache=0):
        print "get_user_passwd() called; host %s, realm %s" % (host, realm)
        return ('name', 'password')

然后我尝试打开页面：

try:
    opener = my_opener()
    f = opener.open ('http://1.2.3.4/whatever.html')
    content = f.read()
    print "Got it:  ", content

except IOError:
    print "Failed!"

我希望 FancyURLopener 能够处理 401，调用我的 get_user_passwd()，然后重试请求。

它不是; 当我调用“f = opener.open()”时，我得到了 IOError 异常。

Wireshark 告诉我请求已发送，并且服务器正在发送带有两个感兴趣的标头的“401 Unauthorized”响应：

WWW-Authenticate: BASIC
Connection: close

然后连接关闭，我发现我的异常，一切都结束了。

即使我在 IOError 之后重试“f = opener.open()”，它也会以同样的方式失败。

我已经验证了我的 my_opener() 类正在通过使用简单的“print 'Got 401 error'”覆盖 http_error_401() 方法来工作。我也尝试过覆盖 prompt_user_passwd() 方法，但这也没有发生。

我看不到主动指定用户名和密码的方法。

那么如何让 urllib 重试请求呢？

谢谢。

4

1 回答 1

0

我刚刚在我的网络服务器（nginx）上尝试了您的代码，它按预期工作：

  • 从 urllib 客户端获取

  • HTTP/1.1 401 未经授权来自带有标头的服务器

    Connection: close
WWW-Authenticate: Basic realm="Restricted"

  • 客户端再次尝试使用授权标头

    Authorization: Basic <Base64encoded credentials>

  • 服务器响应 200 OK + Content

所以我猜你的代码是正确的（我用 python 2.7.1 试过），也许你试图访问的网络服务器没有按预期工作。这是使用免费的 http 基本身份验证测试站点 browserspy.dk 测试的代码（似乎他们正在使用 apache - 代码按预期工作）：

import urllib

class my_opener (urllib.FancyURLopener):

    # Redefine
    def get_user_passwd(self, host, realm, clear_cache=0):
        print "get_user_passwd() called; host %s, realm %s" % (host, realm)
        return ('test', 'test')

try:
    opener = my_opener()
    f = opener.open ('http://browserspy.dk/password-ok.php')
    content = f.read()
    print "Got it:  ", content

except IOError:
    print "Failed!"
于 2011-07-15T21:08:01.177 回答