我在机器 A 上有一个 Spark master,在另一台机器 B 和 C 上有两个 Spark worker。如果机器 A 由于任何原因出现故障,Spark master 在这种情况下会死掉。
有什么方法可以恢复 Spark Master 或在另一台机器上自动创建新的 Spark Master?
谁能帮我解决这个问题?
提前致谢。
问候, 阿尤什
我在机器 A 上有一个 Spark master,在另一台机器 B 和 C 上有两个 Spark worker。如果机器 A 由于任何原因出现故障,Spark master 在这种情况下会死掉。
有什么方法可以恢复 Spark Master 或在另一台机器上自动创建新的 Spark Master?
谁能帮我解决这个问题?
提前致谢。
问候, 阿尤什
最近的拉取请求增加了对使用 ZooKeeper 的独立 Master 容错的支持。该拉取请求刚刚合并到主分支中,因此该功能应合并到 0.9.0 版本中。同时,您可以通过构建 Spark 的开发版本来进行尝试。