2

我们有 AWS 数据管道，其中有一个活动（python 脚本），它从/向 s3 存储桶读取/写入数据。我们最近注意到由于套接字连接关闭而导致从 s3 读取失败的活动失败。错误是间歇性的。失败发生在脚本的同一行。

read_buff = key_file.read(1024)
File "/usr/lib/python2.7/site-packages/boto/s3/keyfile.py", line 89, in read
  return self.key.read(size)
File "/usr/lib/python2.7/site-packages/boto/s3/key.py", line 373, in read
  data = self.resp.read(size)
File "/usr/lib/python2.7/site-packages/boto/connection.py", line 414, in read
  return httplib.HTTPResponse.read(self, amt):
File "/usr/lib64/python2.7/httplib.py", line 561, in read
  s = self.fp.read(amt)
File "/usr/lib64/python2.7/socket.py", line 380, in read
  data = self._sock.recv(left)
File "/usr/lib64/python2.7/ssl.py", line 241, in recv
  return self.read(buflen)
File "/usr/lib64/python2.7/ssl.py", line 160, in read
  return self._sslobj.read(len)

error: [Errno 104] Connection reset by peer

在我们的代码中，我们以 1KB 的块从 s3 读取数据。失败发生在从 s3 中读取文件的过程中。有谁知道允许从 EC2 实例到 s3 存储桶的连接数是否有上限？

4

0 回答 0