hadoop - 在混合操作系统上设置 Hadoop 集群

Question

我有一台带有 10.7.4 的 MBP 和一台带有 Ubuntu 12.04 的笔记本电脑。这样的混合环境是否可以建立一个hadoop集群？

最好的祝福，

Answer 1

应该没有什么可以停止为 Hadoop 集群使用异构环境。对于开发环境它应该没问题，但对于生产它不是。

混合环境应该不是问题，但是在不同环境中设置 Hadoop 时可能需要一些时间来调试问题。如果您真的很担心，请使用虚拟机。

需要注意的一点是，在速度较慢的机器上，这些任务可能会花费大量时间，并且可能会影响完成整个工作的总时间。在这种情况下，更细粒度的拆分可能会有所帮助。