我正在编写一个需要从 Twitter请求大量数据的数据分析服务。我们尝试使用第三方解决方案,但成本很高,并且仍然存在限制。以下是我们的数据需求示例:
每天一次,我们有一个需要请求的实用程序:
用户信息,即@johndoe(有关所需数据,请参阅此 Twitter 响应:https ://dev.twitter.com/docs/api/1/get/users/lookup)@johndoe的每个关注者的用户信息。需要#tweets、#followers 等信息
我们还需要一种方法来找到@johndoe 的一个追随者提到/RT'd @johndoe 的提及/RT 的总数。
由于 Twitter 的速率限制/节流,我们可能无法使用 Twitter 的 API 来实现这一点。是否有任何其他服务或策略来获取如此多的数据?
该实用程序是用 PHP 编写的,并且还需要保存到 MySQL 数据库。不确定这是否是必要的信息,但只是确保。