0

我正在尝试通过 Flume 将 twitter 数据下沉到 hbase 中。Flume 进程因以下信息而停止

15/08/04 10:11:59 INFO lifecycle.LifecycleSupervisor: Stopping lifecycle supervisor 10

这是我的flume.conf

#source
###############################################################
TwitterAgent.sources = Twitter
TwitterAgent.channels = MemChannel
TwitterAgent.sinks = HbaseOut

TwitterAgent.sources.Twitter.type=MyTwitterSourceForFlume
TwitterAgent.sources.Twitter.channels = MemChannel
###############################################################
#chennal
###############################################################
TwitterAgent.channels.MemChannel.type = memory
TwitterAgent.channels.MemChannel.capacity = 10000
TwitterAgent.channels.MemChannel.transactionCapacity = 100
###############################################################
# HBase sink config
###############################################################
TwitterAgent.sinks.HbaseOut.type = org.apache.flume.sink.hbase.AsyncHBaseSink
TwitterAgent.sinks.HbaseOut.channel =MemChannel
TwitterAgent.sinks.HbaseOut.table=Fallowers_table
TwitterAgent.sinks.HbaseOut.columnFamily=Fallowers_det
TwitterAgent.sinks.HbaseOut.batchSize = 5000
TwitterAgent.sinks.HbaseOut.serializer = TwitterSplittingSerializer

flume.conf 有任何配置问题吗?还是hbase序列化程序有问题?

那么我该如何调试呢?

4

0 回答 0