Я ищу что-то, что облегчит запуск (правильно закодированный) смущающе параллельного кода JVM в кластере (чтобы я мог использовать Clojure + Incanter).
В прошлом я использовал Parallel Python для этого. У нас есть новый кластер PBS, и наш администратор скоро настроит узлы IPython, которые используют PBS в качестве бэкэнда. Обе эти системы позволяют легко выполнять определенные типы кода в кластере.
В прошлом я допустил ошибку при использовании Hadoop (Hadoop просто не подходит для того типа данных, который я использую) - из-за задержки даже небольшие прогоны выполнялись в течение 1-2 минут.
JPPF или Gridgain лучше для того, что мне нужно? У кого-нибудь здесь есть опыт работы с любым из них? Вы можете порекомендовать что-нибудь еще?