9

我正在寻找可以在集群上轻松运行(正确编码)令人尴尬的并行 JVM 代码的东西(以便我可以使用 Clojure + Incanter)。

我过去曾使用 Parallel Python 来执行此操作。我们有一个新的 PBS 集群,我们的管理员将很快设置使用 PBS 作为后端的 IPython 节点。这两个系统都使得在集群中运行某些类型的代码几乎是一件轻而易举的事。

过去我犯了使用 Hadoop 的错误(Hadoop 只是不适合我使用的那种数据)——延迟使得即使是小的运行也要执行 1-2 分钟。

JPPF 或 Gridgain 是否更适合我的需求?这里有没有人有任何经验?你还有什么可以推荐的吗?

4

4 回答 4

3

查看 cascalog - http://github.com/nathanmarz/cascalog

于 2010-07-19T19:07:38.953 回答
2

据报道,Clojure 可以在Terracotta上工作,但需要进行一些修补。

于 2010-03-27T19:30:15.230 回答
1

看看

编辑 :

上面的链接已经没有了,所以添加 github 链接

https://github.com/mleyton/Skandium

于 2010-03-24T16:25:45.787 回答
0

我建议你看看Skandium,可以根据要求与开发人员协商 GPL 的替代许可证。

于 2010-12-31T16:57:53.650 回答