1

我正在尝试使用 cloudera 管理器 (CDH5b2) 将 lzo 支持添加到我的配置文件中。

如果我添加io.compression.codecs到服务范围的 hdfs 配置,并部署配置文件,/etc/hadoop/conf.cloudera.hdfs/core-site.xml现在包含新值。

但是,/etc/hadoop/conf.cloudera.yarn/core-site.xml具有更高的优先级 ( update-alternatives --display hadoop-conf),当我开始 MR 作业时不使用 hdfs core-site.xml 值。

显然,我可以简单地core-site.xml手动修改 yarn 文件,但我不明白如何core-site.xml使用 cloudera manager 正确部署 hdfs 文件。

4

1 回答 1

0

有一个 MapReduce 客户端环境安全阀,也称为 'MapReduce Service Advanced Configuration Snippet (Safety Valve) for core-site.xml' 在 gui 下的 mapreduce 配置 ->Service-Wide->Advanced 将允许您添加任何不适合其他地方的价值。(core-site.xml 也有一个。)

话虽如此,详细信息可以在 Cloudera 的网站上找到:http: //www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/cdh_ig_cdh5_install.html

于 2014-12-02T20:14:14.533 回答