目前,我有使用 MRv1 运行 CDH 5.0 的 3 节点集群。我想弄清楚如何在我的 Mac 上设置 Hadoop。所以,我可以向集群提交作业。根据“在 CDH 5 中管理 Hadoop API 依赖项”,您只需要/usr/lib/hadoop/client-0.20/*
我是否也需要以下文件中的文件?Cloudera 有hadoop-client
tarball 吗?
- core-site.xml
- hdfs-site.xml
- mapred-site.xml
目前,我有使用 MRv1 运行 CDH 5.0 的 3 节点集群。我想弄清楚如何在我的 Mac 上设置 Hadoop。所以,我可以向集群提交作业。根据“在 CDH 5 中管理 Hadoop API 依赖项”,您只需要/usr/lib/hadoop/client-0.20/*
我是否也需要以下文件中的文件?Cloudera 有hadoop-client
tarball 吗?
- core-site.xml
- hdfs-site.xml
- mapred-site.xml
是的,我可以使用 cloudera tarball 来设置 hadoop 客户端,同样可以从以下路径下载,配置文件在 Hadoop 下的 etc/hadoop/ 目录下,只需要根据你的修改这些文件环境。
http://archive-primary.cloudera.com/cdh5/cdh/5/hadoop-2.2.0-cdh5.0.0-beta-2.tar.gz
如果以上链接与您的版本不匹配,请使用以下链接获取可用的 hadoop 版本