作为 Hadoop 应用程序的新开发人员，我正在努力掌握一个Map/Reduce或一个Oozie或一个 Sqoop工作的无数配置选项。推荐的书籍或网站都没有全面处理这个问题。您将看到更多 Hadoop 生态系统中的任何新工具。我想问了解工作配置选项的最佳方式/资源是什么。
问问题
262 次
2 回答
1
我阅读了 hadoop：权威指南，它对我非常有用。
此外，在读取hadoop 中的任何配置属性时，您必须将其与 hadoop 的相应元素相关联。
就像任何以开头mapred.map的属性都用于设置映射器任务的属性一样 mapred.reduce，reducer 也是如此。
通过这种方式，您可以轻松理解和记住这些属性。
于 2013-03-04T17:48:17.817 回答
0
在这里，您拥有 Hadoop 的所有配置：
https://hadoop.apache.org/docs/r2.5.1/hadoop-project-dist/hadoop-common/core-default.xml
此外，如果您想查看当前配置是什么以及它来自哪里，请运行以下命令：
$ hadoop org.apache.hadoop.conf.Configuration
于 2014-11-18T13:25:30.237 回答