2

我正在使用 twitter api 开发一个应用程序,其中涉及编写一个方法来检查用户是否存在。这是我的代码:

  public static bool checkUserExists(string user)
    {
        //string URL = "https://twitter.com/" + user.Trim();
        //string URL = "http://api.twitter.com/1/users/show.xml?screen_name=" + user.Trim();
        //string URL = "http://google.com/#hl=en&sclient=psy-ab&q=" + user.Trim();
        string URL = "http://api.twitter.com/1/users/show.json?screen_name=" + user.Trim();
        HttpWebRequest webRequest = (HttpWebRequest)WebRequest.Create(URL);
        try
        {
            var webResponse = (HttpWebResponse)webRequest.GetResponse();
            return true;
        }
        //this part onwards does not matter
        catch (WebException ex)
        {
            if (ex.Status == WebExceptionStatus.ProtocolError && ex.Response != null)
            {
                var resp = (HttpWebResponse)ex.Response;
                if (resp.StatusCode == HttpStatusCode.NotFound)
                {
                    return false;
                }
                else
                {
                    throw new Exception("Unknown level 1 Exception", ex);
                }
            }
            else
            {
                throw new Exception("Unknown level 2 Exception", ex);
            }
        }
    }

问题是,调用该方法不起作用(它没有得到响应)超过 2 或 3 次,使用任何已评论的 url,包括谷歌搜索查询(我认为这可能是由于 twitter API 限制)。在调试时,它显示它卡在:

var webResponse = (HttpWebResponse)webRequest.GetResponse();

我是这样称呼它的:

Console.WriteLine(TwitterFollowers.checkUserExists("handle1"));
Console.WriteLine(TwitterFollowers.checkUserExists("handle2"));
Console.WriteLine(TwitterFollowers.checkUserExists("handle3"));
Console.WriteLine(TwitterFollowers.checkUserExists("handle4"));
Console.WriteLine(TwitterFollowers.checkUserExists("handle5"));
Console.WriteLine(TwitterFollowers.checkUserExists("handle6"));

最多我得到2-3行输出。有人可以指出什么问题吗?

更新 1:
我每 15 秒发送 1 个请求(在限制范围内),它仍然会导致错误。另一方面,发送请求、关闭应用程序并再次运行它的效果非常好(平均每 5 秒有 1 个请求)。速率限制为每小时 150 次Twitter 常见问题解答

另外,我确实等了一段时间,并在第 2 级得到了这个异常:http: //pastie.org/3897499

更新 2: 听起来可能令人惊讶,但如果我运行 fiddler,它会完美运行。不管我是否针对这个过程!

4

2 回答 2

4

您看到的效果几乎可以肯定是由于 Twitter API 上的速率限制类型策略(快速连续的多个请求)。他们密切关注您如何使用他们的 API:第一步是检查他们的使用条款和速率限制政策,并确保您遵守规定。

我突然想到两件事:

  1. 您正在快速连续地使用多个请求访问 API。大多数 REST API,包括 Google 搜索,都不允许你这样做。这些 API 是非常明显的目标,它们积极主动地防止拒绝服务攻击是有道理的。
  2. 您的请求中没有指定用户代理。大多数 API 要求您向他们发送有意义的 UA,以帮助他们识别您。
于 2012-05-11T22:40:05.087 回答
2
  1. 请注意,您正在处理HttpWebResponse. 因此Dispose()及时调用或将对象包装在using语句中不仅是明智的,而且对于避免阻塞也很重要。
  2. 此外,var 非常适合处理匿名类型、Linq 查询结果等,但它不应该成为拐杖。当您非常了解类型时,为什么要使用 var 呢?(即,您已经在执行强制转换HttpWebResponse。)
  3. 最后,像这样的服务通常会限制每秒的连接速率和/或允许同时连接的数量,以防止滥用。如果不处理您的 HttpWebResponse 对象,您可能会违反允许的同时连接数。通过过于频繁地查询,您将打破速率限制。
于 2012-05-11T22:57:22.220 回答