hadoop - 数据节点之间的连接

Question

是否有可能拥有不具有互连性的数据节点。但所有数据节点都可以与名称节点对话。

例如：我的机器中有 4 个从属设备、2 个本地虚拟机和 2 个网络虚拟机，而我的机器是主设备。网络虚拟机无法 ping 我的本地虚拟机。这个条件在 hadoop 配置中有效吗？是否可以确保数据是否进入网络 vm，它应该只在网络 vm 之间复制。

Answer 1

在减少阶段，需要通过 http 从对等节点收集中间数据。这就是为什么需要节点之间的某种通信。例如，如果它不能，则可能存在错误。