我正在尝试在 Windows 机器上设置 Spark 集群。
去这里的方法是使用独立模式,对吧?
不使用 Mesos 或 YARN 的具体缺点是什么?使用其中任何一种会有多痛苦?有人在这里有经验吗?
问问题
4739 次
2 回答
2
仅供参考,我在用户组中得到了答案:https ://groups.google.com/forum/#!topic/spark-users/SyBJhQXBqIs
独立模式确实是要走的路。Mesos 不能在 Windows 和 YARN 下工作。
于 2013-07-05T07:19:50.770 回答
1
快速注意,YARN 最终应该可以通过 Hortonworks 数据平台在 Windows 上运行(2.0 beta 版在 YARN 上,但目前仅在 Linux 上)。另一个可能的途径是让它在 Hadoop 1.1(Windows 1.1 的 Hortonworks 数据平台)上运行——但是让它在独立模式下运行的方法绝对是最容易实现的。
于 2013-07-20T20:23:36.180 回答