2

我在 mongoDB 集合中有 100,000 条记录,并尝试使用本机驱动程序在 node.js 应用程序中检索它们。

我按照MongoDB 文档中的示例进行 CursorStream但得到错误:

RangeError: Maximum call stack size exceeded

在这个错误之前,我得到了很多:

(node) warning: Recursive process.nextTick detected. This will break in the next version of node. Please use setImmediate for recursive deferral.

这是我的代码:

var query = {...};
var fields = {...};
var options = {
    // "limit": 10
    //"skip": 10,
    //"sort": title
}

var stream = myCollection.find(query, fields, options).stream();
//  stream.pause();
var results = [];
stream.on('data', function (item){
    results.push(item);
    stream.pause();
    // Restart the stream after 1 miliscecond
    setTimeout(function() {
        stream.resume();
    }, 1);
});

stream.on('close'.....

当我没有为“数据”事件定义侦听器时,也会发生错误。但如果在创建后立即暂停流,则不会发生。

mongod版本是v2.4.1 node驱动版本是1.2.x

任何帮助/提示将不胜感激。

4

2 回答 2

6

看起来问题是通过在光标流中设置批量大小来解决的:

var stream = myCollection.find(query, fields, options).batchSize(10000).stream();
于 2013-04-22T19:27:48.610 回答
0

您可能想尝试使用 setImmediate而不是 setTimeout,以确保可以刷新未完成的 IO 操作。另请参阅https://github.com/ZJONSSON/streamz/issues/1

于 2013-04-19T12:49:07.330 回答