-1

我正在使用flume将twitter数据下载到hdfs中。虽然我有超过 2 GB 的数据,但我的块文件拆分小于 64 MB。即第一个文件 300KB,第二个文件 - 566 KB。为什么会这样?

4

1 回答 1

0

那是因为您的水槽配置。

阅读内容,您必须设置hdfs.rollIntervalhdfs.rollSize

于 2015-02-09T12:59:26.280 回答