0

我正在尝试使用来自 Joyent 的 Manta 的 Node.js SDK 从可读流中写入文件。

网页上给出的示例是这样的:

var MemoryStream = require('memorystream');

var message = 'Hello World'
var opts = {
    copies: 3,
    headers: {
        'access-control-allow-origin': '*',
        'access-control-allow-methods': 'GET'
    },
    md5: crypto.createHash('md5').update(message).digest('base64'),
    size: Buffer.byteLength(message),
    type: 'text/plain'
};
var stream = new MemoryStream();
var w = client.createWriteStream('/jill/stor/hello_world.txt', opts);

stream.pipe(w);

w.once('close', function (res) {
    console.log('all done');
});

stream.end(message);

但是如果我们使用 writeStream 将文件/对象/字符串放入程序中,情况就是这样,如果我想传递一个要写入的可读流怎么办,像这样?

 function saveCopyToManta(cb){
    var stream = fs.createReadStream('/tmp/' + filename);

    var opts = {
        copies: 3,
        headers: {
            'access-control-allow-origin': '*',
            'access-control-allow-methods': 'GET'
        },
        md5: crypto.createHash('md5').update(message).digest('base64'),
        size: filesize,
        type: 'text/plain'
    };

    client.put('/someuser/stor/logs/+filename, stream, opts, function (err) {
      if(err) cb(err);
      else cb();
    });
  };

关于这条线,我应该怎么做才能工作:

md5: crypto.createHash('md5').update(message).digest('base64'),

谢谢

4

1 回答 1

1

TL;DR 不要发送 md5。

如果您不介意两次读取流,则可以像这样预先计算 md5:

var fs = require('fs');
var crypto = require('crypto');

function calculateStreamHash(readableStream, algorithm, encoding, cb) {
  var hash = crypto.createHash(algorithm);

  readableStream.on('data', updateHash);
  readableStream.on('end', finish);

  function updateHash(d) {
    hash.update(d);
  }

  function finish() {
    var d = hash.digest(encoding);
    cb(d);
  }
}

calculateStreamHash(fs.createReadStream('/tmp/' + filename), 'md5', 'base64', function(md5) {
  // use md5
});

如果不能选择两次读取流,我建议根本不发送 MD5。查看 Manta 的 Node.js SDK,它似乎是一个可选字段。见https://github.com/joyent/node-manta/blob/master/lib/client.js#L169

实际上,看起来在您使用的特定方法中createWriteStream()md5选项字段被完全忽略了。见https://github.com/joyent/node-manta/blob/master/lib/client.js#L1399

因此,您可能应该忽略该md5字段。

于 2013-11-15T18:06:52.903 回答