hadoop - 如何在 Hadoop 中将机器设置为 Task-Tracker

Question

我是 hadoop 框架的新手，我正在关注“Hadoop in Action”一书。我能够使用 Ubantu 设置伪分布式环境。我对 Task-Tracker 和 DataNode 有一个疑问。

我们在 core-site.xml 中分配 NameNode，在 mapred-site.xml 中分配 Job-Tracker。我们将在哪里定义任务跟踪器和 DataNode。假设我有一台机器“xye3434”，我想将它用作任务跟踪器，我该如何定义它？xml中有一些设置吗？

Answer 1

所有的 TastTrackers/DataNodes 都应该在 Hadoop 安装文件夹的conf/slaves文件中指定。bin/start-dfs.sh 和 bin/start-mapred.sh 脚本将遍历从属文件，然后使用无密码 ssh 登录到机器，然后在所有从属上启动适当的守护进程。