我是 Hadoop 新手,一直在网上寻找设置多节点集群的参考资料。在参考了许多不同的网站和官方文档(对于像我这样的新手来说太复杂了)之后,我一直使用这个博客作为指南。
但是,我就是不明白端口号是如何在配置文件中决定的?我的意思是我推荐了“Haoop In Action”、上一个链接和其他网站,每个人似乎都在为 datanode、jobtracker 等使用不同的值。
我从官方文档中引用了 Common User 的 Web UI 并发现:
默认的 Hadoop 端口如下:
Daemon Default Port Configuration Parameter
HDFS Namenode 50070 dfs.http.address
Datanodes 50075 dfs.datanode.http.address
Secondarynamenode 50090 dfs.secondary.http.address
Backup/Checkpoint node? 50105 dfs.backup.http.address
MR Jobracker 50030 mapred.job.tracker.http.address
Tasktrackers 50060 mapred.task.tracker.http.address
但是,我遇到了诸如 fs.default.name 的 9000 甚至同一事物的 54310 之类的值。这甚至正确吗?可以使用任何值吗?请我最早需要这方面的帮助。谢谢 :)