Какой самый простой способ запустить Hav oop MapReduce в JVM без установки?

Question

Я хотел бы запустить MapReduce в JVM для использования нескольких ядер и использовать свойства Had oop MapReduce для внешней сортировки выходных данных задач карты, что помогает мне выполнять обработку с сохранением состояния при ограниченном (постоянном) потреблении памяти. Я ищу способ программирования c, который можно реплицировать в любом месте, просто запустив jar, поэтому либо встроенный сервер (-ы), либо просто простая версия JVM с одним JVM имеет oop MapReduce, поэтому ничего не нужно устанавливать на компьютер. Docker тоже не вариант. Спасибо

Answer 1

Я бы посоветовал вам использовать Spark или Flink. Очень редко можно встретить кого-нибудь, кто пишет обычный mapreduce

В Spark вы можете использовать local[*] в качестве «мастера», и он будет использовать все доступные ядра