JVM(embarrasingly)并行处理库/工具
-
22-09-2019 - |
题
我寻找的东西,将可以很容易地运行(正确地编码的)尴尬的并行的群集上JVM代码(以便我可以使用的Clojure +咒术)。
我已经使用并行的Python过去做到这一点。我们有一个新的PBS集群,我们的管理员将很快建立使用PBS作为后端IPython的节点。这两种系统使它几乎是显而易见的,以在群集中运行某些类型的代码。
我过去所做的使用Hadoop(Hadoop是只是不适合的数据种类,我使用的)的错误 - 等待时间甚至制成小批量执行1-2分钟
。时JPPF或Gridgain更好地为我所需要的?是否有人在这里有任何的经验吗?还有什么可以推荐的吗?
解决方案
的Clojure被报告给工作在赤土时,受到一些修补。
其他提示
不隶属于 StackOverflow