-1

我正在使用 Stackoverflow API 来收集 Stackoverflow 中的标签。我正在使用 NodeJS 并且面临一个典型的问题。在 230-250 个请求之后，我的速率限制被超出。据我所知，它允许 <30req/sec 。所以根据我的程序它应该可以正常工作，但是在 200 多个周期后我得到了一个异常。我的 nodejs 代码如下：-

var request=require('superagent');
var request=require('mongoose');
mongoose.connect('mongodb://shivkumarganesh:11111@paulo.mongohq.com:10090/lklklklkkkkl_gshiv_sk');
var db = mongoose.connection;
db.on('error', console.error.bind(console, 'connection error:'));
db.once('open', function callback () {
  console.log('Connected');
});

//Schema for Tags
var tagSchema = mongoose.Schema({
    name:String,
    count:Number,
    is_required:Boolean
,    is_moderator_only:Boolean,
    has_synonyms:Boolean});

var Tags = mongoose.model('Tags', tagSchema);

var saveSchema = function(Model){
    Model.save();
}
 ///usr/local/lib/node_modules/superagent  
var i=1;
var req=function(){
    request.get('http://api.stackexchange.com/2.1/tags?page='+i+'&pagesize=100&fromdate=1199145600&todate=1377648000&order=asc&sort=popular&site=stackoverflow')
   .set('X-API-Key', 'foobar')
   .set('Accept', 'application/json')
   .end(function(res){
     if (res.ok && i<346) {
       console.log('yay got ' + res.body);
       var jsonResponse = res.body;
       console.log(jsonResponse.items.length);
       for(var j=0;j<jsonResponse.items.length;j++)
       {
           var model = new Tags(jsonResponse.items[j]);
           saveSchema(model);
       }
       i++;
       console.log("Number of Iteration ---- > "+i);
       setTimeout(function() {
           req();
       }, 3000);

     } else {
       console.log('Oh no! error ' + res.text);
       console.log('Processing Over'+i)
     }
   });

}
req();

请帮我解决这个问题。如果可能，请纠正程序。注意：我用 MongoHQ 来存储数据。

4

1 回答 1

1

您应该阅读此信息链接：https ://api.stackexchange.com/docs/throttle

具体来说：

在每个方法级别上也有一个动态限制。如果应用程序接收到设置了退避字段的响应，它必须等待那么多秒才能再次使用相同的方法。

因此，请检查backoff返回的字段，并在执行另一个请求之前等待这么久。

于 2013-08-28T22:12:07.993 回答