20

我需要开发一个应用程序，让我可以跟踪推文并将它们保存在 mongodb 中以用于研究项目（您可能会收集到，我是菜鸟，所以请多多包涵）。我发现这段代码通过我的终端窗口发送推文：

import sys
import tweepy

consumer_key=""
consumer_secret=""
access_key = ""
access_secret = "" 


auth = tweepy.OAuthHandler(consumer_key, consumer_secret)
auth.set_access_token(access_key, access_secret)
api = tweepy.API(auth)

class CustomStreamListener(tweepy.StreamListener):
    def on_status(self, status):
        print status.text

    def on_error(self, status_code):
        print >> sys.stderr, 'Encountered error with status code:', status_code
        return True # Don't kill the stream

    def on_timeout(self):
        print >> sys.stderr, 'Timeout...'
        return True # Don't kill the stream

sapi = tweepy.streaming.Stream(auth, CustomStreamListener())
sapi.filter(track=['Gandolfini'])

有没有办法可以修改这段代码，而不是让推文在我的屏幕上流式传输，而是将它们发送到我的 mongodb 数据库？

谢谢

4

2 回答 2

18

这是一个例子：

import json
import pymongo
import tweepy

consumer_key = ""
consumer_secret = ""
access_key = ""
access_secret = ""

auth = tweepy.OAuthHandler(consumer_key, consumer_secret)
auth.set_access_token(access_key, access_secret)
api = tweepy.API(auth)


class CustomStreamListener(tweepy.StreamListener):
    def __init__(self, api):
        self.api = api
        super(tweepy.StreamListener, self).__init__()

        self.db = pymongo.MongoClient().test

    def on_data(self, tweet):
        self.db.tweets.insert(json.loads(tweet))

    def on_error(self, status_code):
        return True # Don't kill the stream

    def on_timeout(self):
        return True # Don't kill the stream


sapi = tweepy.streaming.Stream(auth, CustomStreamListener(api))
sapi.filter(track=['Gandolfini'])

这会将推文写入 mongodbtest数据库tweetscollection。

希望有帮助。

于 2013-06-21T09:27:54.463 回答
6

我开发了一个简单的命令行工具来实现这一点。

https://github.com/janezkranjc/twitter-tap

它允许使用流 API 或搜索 API。

于 2014-05-21T11:29:43.693 回答