0

是否有适用于 Hadoop 的标准 Mappers 和 Reducers 的包或集合？

例如，OpenMP 带有一组预定义的用于循环并行化的化简器，它派上用场，但不可扩展。对于 Hadoop，一组类似的基本 reducer 会很方便。

当您使用 Spring-Data Hadoop 构建 Spring Batch 应用程序时，这样的集合将非常有用。

如果没有这样的东西，我们可以开始收集。

氪，R

4

2 回答 2

2

Hadoop 附带了大量的 Mappers 和 Reducers。它们存储在 中org.apache.hadoop.mapred.lib，并涵盖了各种各样的用例。如果您想查看快速列表，这是mapred.libjavadocs Web UI。看一看，看看其中是否符合您的需要。

于 2012-09-13T17:28:38.553 回答
0

看看这个github 项目。我从来没有使用过它，但它声称里面有 spring 和 hadoop 的东西。

于 2012-09-13T17:41:11.470 回答