hadoop - 在map reduce中通过map函数的文件

Question

是否有可能以某种方式通过每个映射函数传递一组文件。要求是为不同的 2 操作并行处理每个文件。我对 map reduce 完全陌生，我使用 JAVA 作为我的编程语言。

Answer 1

如果您想获得与所有映射器的输入相同的文件，以进行只读访问，是的。您可以将文件从主（驱动程序）类添加到所谓的分布式缓存中。更多细节可以在这里找到。