Каковы альтернативы Pervasive DataRush

Question

Мы ищем решение, способствующее массовой параллельной обработке данных. Наши графы обработки часто довольно сложны, так что хорошо разработанная структура оператора, подобная той, которую предоставляет Pervasive DataRush. Кто-нибудь знает альтернативные решения для одного из Pervasive? DataRush - это Java, но я хотел бы рассмотреть все платформы и языки, для которых доступны такие решения.

Answer 1

Не уверен, что вы получите пользу от чего-то вроде hadoop / map-Reduce.Это то, что они, кажется, сравнивают себя по своему маркетинговому обеспечению.Конечно, они также утверждают, что это лучшее / другое решение.

Answer 2

Посмотрите на https://github.com/rfqu/df4j - простая, но мощная библиотека потоков данных. Имеет Actors и другие конструкции потока данных. Хотя ему не хватает постоянства, но он имеет интерфейс с асинхронными каналами NIO2

Answer 3

Pervasive DataRush использует мелкозернистый параллелизм на многоядерных серверах и кластерах. С выпуском V5.0 2 февраля 2011 года Pervasive DataRush теперь поддерживает все языки JVM , включая Java, JRuby, Python и Scala. Он также поддерживает интеграцию с Hadoop / MapReduce. Это дополняет Hadoop.