python - 你能推荐一些 Python HTTP 客户端库吗？

Question

我想使用 Python 从某些网站捕获信息。我希望 HTTP 客户端满足以下条件：

1. 支持HTTPS

2. 不会使用太多内存，不应该产生很多进程或线程。

3. 有清晰的文档并得到积极支持

---

我知道requests,tornado或gevent-httpclient 可以完成我的任务，但我不知道哪个是最好的？或者还有其他选择吗？

或者，如果有一些其他的选择写在C/中c++。

Answer 1

使用requests. 它具有各种库中最相同的 API。

Answer 2

另一种选择是httplib2。

• 简单（因此有效）
• 支持所有需要和 Python 3
• 不在 Github 上
• 在下一次提交之前可能会过去几个月（部分原因是它可以正常工作）

Answer 3

这是另一个建议：

1. GRequests允许您使用带有 Gevent 的请求来轻松地发出异步 HTTP 请求。
2. httplib2
3. 要求
4. treq

Answer 4

我发现 urllib3 是一个不错的选择。它为您设置请求池并轻松处理 SSL。

另外我认为 requests 现在在后台使用它。

http://urllib3.readthedocs.io/en/latest/