10

我从 http 服务获取数据,我想即时解压缩它。这是我目前的方法:

resp, err := http.Get(url)
if err != nil {
    logger.Fatalf("Can't fatch %s data. %v", url, err)
}
logger.Info("Fetched data from %s", url)
content_zipped, err := ioutil.ReadAll(resp.Body)
resp.Body.Close()
if err != nil {
    logger.Fatal(err)
}
zip_reader, err := zip.NewReader(bytes.NewReader(content_zipped), int64(len(content_zipped)))

有没有什么方法可以解压 resp.Body 而无需一次读取所有内容(6. 行)?我的意思是流式传输字节。

4

2 回答 2

13

Zip 档案需要随机访问才能读取,因此很难流式传输字节。特别是,请参阅此处的 zip.Reader.init 源:http://golang.org/src/pkg/archive/zip/reader.go?s=1265:1323# L59。它做的第一件事是readDirectoryEnd从文件末尾附近读取的调用。

您可以使用不同的压缩方法(例如 gzip)吗?然后您可以使用gzip.NewReader(resp.Body)流式传输数据。

于 2013-06-05T18:39:24.597 回答
3

您是否正在寻找类似以下的内容:

var ioReader io.Reader
buff := bytes.NewBuffer([]byte{})
size, err := io.Copy(buff, ioReader)
if err != nil {
    return err
}

reader := bytes.NewReader(buff.Bytes())

// Open a zip archive for reading.
zipReader, err := zip.NewReader(reader, size)
于 2019-03-18T14:20:46.347 回答