hadoop - 有没有一种有效的方法来查找给定键的序列文件？

Question

我的 map-reduce 作业将最终结果写入序列文件。是否有任何有效的方法来查找给定键的序列文件？

Answer 1

如果从映射器发出的键与减速器中的相同键输出，那么您可以通过使用的分区器运行您的搜索键（哈希分区器是默认值），传递键和最初运行作业的减速器数量。这应该为您提供密钥发送到的减速器编号，因此应该包含它的 part-r-xxxxx 文件。