我正在寻找可以在集群上轻松运行(正确编码)令人尴尬的并行 JVM 代码的东西(以便我可以使用 Clojure + Incanter)。
我过去曾使用 Parallel Python 来执行此操作。我们有一个新的 PBS 集群,我们的管理员将很快设置使用 PBS 作为后端的 IPython 节点。这两个系统都使得在集群中运行某些类型的代码几乎是一件轻而易举的事。
过去我犯了使用 Hadoop 的错误(Hadoop 只是不适合我使用的那种数据)——延迟使得即使是小的运行也要执行 1-2 分钟。
JPPF 或 Gridgain 是否更适合我的需求?这里有没有人有任何经验?你还有什么可以推荐的吗?