414

默认情况下,请求python 库将日志消息写入控制台,如下所示:

Starting new HTTP connection (1): example.com
http://example.com:80 "GET / HTTP/1.1" 200 606

我通常对这些消息不感兴趣,并想禁用它们。使这些消息静音或减少 Requests 冗长的最佳方法是什么?

4

12 回答 12

657

我发现了如何配置requests的日志级别,它是通过标准日志模块完成的。我决定将其配置为不记录消息,除非它们至少是警告:

import logging

logging.getLogger("requests").setLevel(logging.WARNING)

如果您也希望将此设置应用于 urllib3 库(通常由请求使用),请添加以下内容:

logging.getLogger("urllib3").setLevel(logging.WARNING)
于 2012-06-14T08:59:53.033 回答
127

如果您来这里寻找修改任何(可能是深度嵌套的)模块的日志记录的方法,请使用logging.Logger.manager.loggerDict获取所有记录器对象的字典。然后可以将返回的名称用作以下参数logging.getLogger

import requests
import logging
for key in logging.Logger.manager.loggerDict:
    print(key)
# requests.packages.urllib3.connectionpool
# requests.packages.urllib3.util
# requests.packages
# requests.packages.urllib3
# requests.packages.urllib3.util.retry
# PYREADLINE
# requests
# requests.packages.urllib3.poolmanager

logging.getLogger('requests').setLevel(logging.CRITICAL)
# Could also use the dictionary directly:
# logging.Logger.manager.loggerDict['requests'].setLevel(logging.CRITICAL)

根据评论中的 user136036,请注意,此方法仅向您显示在您运行上述代码段时存在的记录器。例如,如果一个模块在您实例化一个类时创建了一个新的记录器,那么您必须在创建该类之后放置此代码段以打印其名称。

于 2016-03-24T19:37:45.047 回答
29
import logging
urllib3_logger = logging.getLogger('urllib3')
urllib3_logger.setLevel(logging.CRITICAL)

这样,来自 urllib3 的所有 level=INFO 消息都不会出现在日志文件中。

因此,您可以继续将 level=INFO 用于您的日志消息...只需针对您正在使用的库进行修改。

于 2014-02-12T10:55:25.510 回答
18

对于任何使用logging.config.dictConfig您的人,您都可以像这样更改字典中的请求库日志级别:

'loggers': {
    '': {
        'handlers': ['file'],
        'level': level,
        'propagate': False
    },
    'requests.packages.urllib3': {
        'handlers': ['file'],
        'level': logging.WARNING
    }
}
于 2016-02-01T19:52:59.510 回答
17
import logging

# Only show warnings
logging.getLogger("urllib3").setLevel(logging.WARNING)

# Disable all child loggers of urllib3, e.g. urllib3.connectionpool
logging.getLogger("urllib3").propagate = False
于 2020-02-28T09:41:42.420 回答
15

在遇到与您类似的问题后,让我复制/粘贴我大约一两周前写的文档部分:

import requests
import logging

# these two lines enable debugging at httplib level (requests->urllib3->httplib)
# you will see the REQUEST, including HEADERS and DATA, and RESPONSE with HEADERS but without DATA.
# the only thing missing will be the response.body which is not logged.
import httplib
httplib.HTTPConnection.debuglevel = 1

logging.basicConfig() # you need to initialize logging, otherwise you will not see anything from requests
logging.getLogger().setLevel(logging.DEBUG)
requests_log = logging.getLogger("requests.packages.urllib3")
requests_log.setLevel(logging.DEBUG)
requests_log.propagate = True

requests.get('http://httpbin.org/headers')
于 2013-04-16T17:08:46.023 回答
8

将记录器名称设置为requestsrequests.urllib3不适合我。我必须指定确切的记录器名称来更改记录级别。

首先查看您定义了哪些记录器,以查看您要删除哪些记录器

print(logging.Logger.manager.loggerDict)

你会看到这样的东西:

{...'urllib3.poolmanager': <logging.Logger object at 0x1070a6e10>, 'django.request': <logging.Logger object at 0x106d61290>, 'django.template': <logging.Logger object at 0x10630dcd0>, 'django.server': <logging.Logger object at 0x106dd6a50>, 'urllib3.connection': <logging.Logger object at 0x10710a350>,'urllib3.connectionpool': <logging.Logger object at 0x106e09690> ...}

然后为确切的记录器配置级别:

   'loggers': {
    '': {
        'handlers': ['default'],
        'level': 'DEBUG',
        'propagate': True
    },
    'urllib3.connectionpool': {
        'handlers': ['default'],
        'level': 'WARNING',
        'propagate' : False
    },
于 2018-12-06T20:39:41.457 回答
4

如果你有配置文件,你可以配置它。

在记录器部分添加 urllib3:

[loggers]
keys = root, urllib3

添加 logger_urllib3 部分:

[logger_urllib3]
level = WARNING
handlers =
qualname = requests.packages.urllib3.connectionpool
于 2017-07-09T07:34:26.967 回答
3

这个答案在这里: Python:如何抑制来自第三方库的日志语句?

您可以保留 basicConfig 的默认日志记录级别,然后在获取模块的记录器时设置 DEBUG 级别。

logging.basicConfig(format='%(asctime)s %(module)s %(filename)s:%(lineno)s - %(message)s')
logger = logging.getLogger(__name__)
logger.setLevel(logging.DEBUG)

logger.debug("my debug message")
于 2019-10-22T23:06:20.540 回答
0

我不确定以前的方法是否已经停止工作,但无论如何,这是删除警告的另一种方法:

PYTHONWARNINGS="ignore:Unverified HTTPS request" ./do-insecure-request.py

基本上,在脚本执行的上下文中添加一个环境变量。

来自文档:https ://urllib3.readthedocs.org/en/latest/security.html#disabling-warnings

于 2016-03-10T03:46:12.460 回答
0

Kbrose 关于查找哪个记录器正在生成日志消息的指导非常有用。对于我的 Django 项目,我必须对 120 个不同的记录器进行分类,直到我发现是elasticsearchPython 库给我带来了问题。根据大多数问题的指导,我通过将其添加到我的记录器来禁用它:

      ...
      'elasticsearch': {
          'handlers': ['console'],
          'level': logging.WARNING,
      },     
      ...

在此处发布以防其他人在运行 Elasticsearch 查询时看到无用的日志消息。

于 2017-11-22T17:03:35.697 回答
-1

简单:只需在requests.packages.urllib3.disable_warnings()之后添加import requests

于 2016-02-09T02:22:10.277 回答