14

我想这很容易做到,但我不知道我做错了什么。我正在使用 Abraham 的 OAuth 来获得访问权限。我正在使用我的关注者信息构建一个数据库:屏幕名称、用户名和 Twitter ID。没什么特别的。

我参考了 Twitter 的“游标”页面,尤其是伪代码,来制作我的代码。对于那些不想点击链接查看所述伪代码的人,它看起来如下所示:

cursor = -1

api_path = "https://api.twitter.com/1.1/endpoint.json?screen_name=targetUser"

do {

    url_with_cursor = api_path + "&cursor=" + cursor      

    response_dictionary = perform_http_get_request_for_url( url_with_cursor )

    cursor = response_dictionary[ 'next_cursor' ]

}

while ( cursor != 0 )

对于每个请求,最终用户都会获得一个“光标”,允许他们浏览结果的“页面”。每页有 20 个,如果你有 200 个关注者,你必须浏览 10 页。我有超过 900 名追随者。我将其修改为如下所示:

 include('config.php');  //db connection
 include('twitter_oauth.php'); //oauth connection

 $followers = "";

$cursor = -1;
echo '<pre>';   
do {

    $consumerKey = 'xxx';
    $consumerSecret = 'xxx';
    $OAuthToken = 'xxx';
    $OAuthSecret = 'xxx';

    $tweet = new TwitterOAuth($consumerKey, $consumerSecret, $OAuthToken, $OAuthSecret);

    $followers = $tweet->get('followers/list', array('screen_name' => 'my_screen_name', 'cursor' => $cursor));

    print_r($followers);

    if (isset($followers->error)) {
        echo $followers->next_cursor_str;
        break;
    } 

    foreach($followers->users as $users) {

        $followersQ = mysql_query("SELECT * FROM followers WHERE tw_id = '".$users->id."'") or die(mysql_error());
        $num_rows = mysql_num_rows($followersQ);

        if ($num_rows == 0) {
            $followersQ2 = "INSERT INTO followers 
                                        (screen_name, name, tw_id)
                                        VALUES
                                        ('".$users->screen_name."', '".$users->name."', '".$users->id."')";
            $followersR = mysql_query($followersQ2) or die(mysql_error());
            echo 'done one set<br>';
        }

    }


    $cursor = $followers->next_cursor_str;

}

while ( $cursor != 0 );
echo '</pre>';

?>

上面的代码调用 twitter 关注者/列表并获得前 20 个用户。然后它得到一个光标并转到下一个,然后重复。只是,似乎在大约 80 个用户之后它给了我可爱的感觉:

[errors] => Array
    (
        [0] => stdClass Object
            (
                [message] => Rate limit exceeded
                [code] => 88
            )

    )

我可以手动获取下一个光标,等待 15 分钟让速率限制下降,用光标再次调用该函数,获取接下来的 80 个项目,然后获取该键并重复,但我想设置一个脚本,可以一遍又一遍地调用它。

我觉得我做错了什么,无论是在我调用 oAuth 的函数中,还是在它之外的某个地方。有人可以指出我正确的方向吗?

谢谢你。

4

2 回答 2

18

这是一种更快的方式,但也有一个限制问题:

1-发出请求以获取所有关注者 ID ...在页面中使用 5000 个 ID 进行分页 https://developer.twitter.com/en/docs/twitter-api/v1/accounts-and-users/follow-search-获取用户/api-reference/get-followers-ids

2-循环 id 并以逗号分隔的字符串发送每 100 个 id 以获取他们的信息 https://developer.twitter.com/en/docs/twitter-api/v1/accounts-and-users/follow-search-获取用户/API 参考/获取用户查找

3-现在你可以每 15 分钟获得 1500 个用户对象而不是 300 个用户对象

但是您还需要每 15 个请求设置一个计时器,以防关注者列表超过 1500

于 2013-09-04T09:45:09.720 回答
2

我认为没有任何方法可以绕过施加的限制。即使是 tweetbot 也有这个限制,因为这是 twitter 强加的限制。您可以在当前状态的数据库中创建一个注释,并将一个 cron 作业设置为每 15 分钟运行一次,这将再次运行一组请求。这需要时间,但它可以在完成后通过电子邮件通知您。这就是 socialbro 这样的服务所做的。当然,您会将这些结果缓存在您的数据库中。

于 2013-09-04T08:24:34.967 回答