Объединить результат MapReduce с данными - PullRequest
0 голосов
/ 23 июня 2011

Как я могу объединить с картой / уменьшить эти два файла:

Файл1.Данные.

1   name:foo1,position:bar1
2   name:foo2,position:bar2
3   name:foo3,position:bar3
4   name:foo4,position:bar4
5   name:foo5,position:bar5

Файл2.Результат вычисления MR.

1   1,2
3   3,4,5

Цель:

1   foo1,foo2
3   foo3,foo4,foo5

1 Ответ

1 голос
/ 23 июня 2011

Это похоже на объединение, которое, безусловно, выполнимо, но немного затруднительно при уменьшении прямой карты.Вы рассматривали языки более высокого уровня, такие как Pig или Hive, чтобы упростить эту задачу?

...