Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
我正在使用flume将twitter数据下载到hdfs中。虽然我有超过 2 GB 的数据,但我的块文件拆分小于 64 MB。即第一个文件 300KB,第二个文件 - 566 KB。为什么会这样?
那是因为您的水槽配置。
阅读此内容,您必须设置hdfs.rollInterval或hdfs.rollSize