Apache Storm против Apache Airflow

Question

В чем разница между двумя?Насколько я понимаю, оба они основаны на концепции направленного ациклического графа (DAG), и Storm обрабатывает данные в режиме реального времени, а Airflow скорее перемещает все это с одной стадии на другую.Это единственная разница между ними?Для каких видов работ они оба подходят?

Answer 1

Airflow - это оркестрирующий двигатель, такой как Azkaban или Oozie.Storm - это процессор обработки данных почти в реальном времени, который в значительной степени был заменен Spark Streaming или Heron (замена Storm 2-го поколения в Twitter).