python - Python urllib2：从 url 接收 JSON 响应

Question

我正在尝试使用 Python 获取 URL，响应是 JSON。但是，当我跑步时

import urllib2
response = urllib2.urlopen('https://api.instagram.com/v1/tags/pizza/media/XXXXXX')
html=response.read()
print html

html 是 str 类型，我期待一个 JSON。有什么方法可以将响应捕获为 JSON 或 python 字典而不是 str。

Answer 1

如果 URL 返回有效的 JSON 编码数据，请使用json库对其进行解码：

import urllib2
import json

response = urllib2.urlopen('https://api.instagram.com/v1/tags/pizza/media/XXXXXX')
data = json.load(response)   
print data

Answer 2

import json
import urllib

url = 'http://example.com/file.json'
r = urllib.request.urlopen(url)
data = json.loads(r.read().decode(r.info().get_param('charset') or 'utf-8'))
print(data)

urllib，对于 Python 3.4
HTTPMessage，由 r.info() 返回

Answer 3

"""
Return JSON to webpage
Adding to wonderful answer by @Sanal
For Django 3.4
Adding a working url that returns a json (Source: http://www.jsontest.com/#echo)
"""

import json
import urllib

url = 'http://echo.jsontest.com/insert-key-here/insert-value-here/key/value'
respons = urllib.request.urlopen(url)
data = json.loads(respons.read().decode(respons.info().get_param('charset') or 'utf-8'))
return HttpResponse(json.dumps(data), content_type="application/json")

Answer 4

小心验证等，但直接的解决方案是：

import json
the_dict = json.load(response)

Answer 5

resource_url = 'http://localhost:8080/service/'
response = json.loads(urllib2.urlopen(resource_url).read())

Answer 6

Python 3 标准库单行：

load(urlopen(url))

# imports (place these above the code before running it)
from json import load
from urllib.request import urlopen
url = 'https://jsonplaceholder.typicode.com/todos/1'

Answer 7

您还可以使用requests如下方式获取 json：

import requests

r = requests.get('http://yoursite.com/your-json-pfile.json')
json_response = r.json()

Answer 8

虽然我猜它已经回答了我想在这个中添加我的一点点

import json
import urllib2
class Website(object):
    def __init__(self,name):
        self.name = name 
    def dump(self):
     self.data= urllib2.urlopen(self.name)
     return self.data

    def convJSON(self):
         data=  json.load(self.dump())
     print data

domain = Website("https://example.com")
domain.convJSON()

注意：传递给json.load()的对象应该支持.read()，因此urllib2.urlopen(self.name).read()不起作用。在这种情况下，应为传递的域提供协议http

Answer 9

这是您问题的另一个更简单的解决方案

pd.read_json(data)

其中 data 是以下代码的 str 输出

response = urlopen("https://data.nasa.gov/resource/y77d-th95.json")
json_data = response.read().decode('utf-8', 'replace')

Answer 10

此处提供的示例均不适合我。它们用于 Python 2 (uurllib2) 或用于 Python 3 的返回错误“ImportError: No module named request”。我用谷歌搜索错误消息，它显然需要我安装一个模块——这对于这样一个简单的任务显然是不可接受的。

这段代码对我有用：

import json,urllib
data = urllib.urlopen("https://api.github.com/users?since=0").read()
d = json.loads(data)
print (d)