1

我们有一些关于组建网络爬虫以从 Twitter 收集一些数据的快速问题。

例如,如果我们想使用几百个user IDs作为关键字来收集一些必要的推文。但是,我们似乎只能使用有限数量的关键字(12 个?),我们可以一次启动一个爬虫。

有小费吗?

4

1 回答 1

0

由于Twitter API 限制(速率限制),无法想象爬取整个网站,除非您有很多时间或除非您付费才能获得对 twitterhose 的特殊访问权限,这应该是解决问题的唯一方法你提到的问题

于 2013-07-16T13:36:39.460 回答