Хороший пример в hadoop, который нуждается в итерации

Question

В настоящее время я внедряю параллельный метод on для цикла hasoop, чтобы выполнить итерацию числа раз, как указано пользователем.Может кто-нибудь помочь мне с полезным примером, что я могу использовать мою реализацию для тестирования.Некоторое приложение в Hadoop, которое нуждается в итерации функции Mapper.Спасибо

Answer 1

Самым простым является реализация алгоритма Apriori , который используется для поиска частого набора элементов.

Answer 2

Что именно вы подразумеваете под «итерацией картографа»?У меня есть пример рекурсивного запуска задания (на входе последнего задания).

Посмотрите здесь, он объясняет простой алгоритм анализа поиска / анализа графа: http://codingwiththomas.blogspot.com/2011/04/graph-exploration-with-hadoop-mapreduce.html

Здесь более общая версия: http://codingwiththomas.blogspot.com/2011/04/controlling-hadoop-job-recursion.html

Answer 3

Есть много примеров в интеллектуальном анализе данных.Вы можете попробовать один из алгоритмов кластеризации, например.