Напротив ГРУППЫ в латинском апач свиньи? - PullRequest
1 голос
/ 12 января 2012

Допустим, у меня есть следующий ввод в apache pig:

(123, ( (1, 2), (3, 4) ) )
(666, ( (8, 9), (10, 11), (3, 4) ) )

и я хочу преобразовать эти 2 строки в следующие 7 строк:

(123, (1, 2) )
(123, (3, 4) )
(666, (8, 9) )
(666, (10, 11) )
(666, (3, 4) )

т.е.«делать противоположность группы».Возможно ли это в латинской свинье?

1 Ответ

2 голосов
/ 12 января 2012

Взгляните на FLATTEN.Он делает то, что вам, вероятно, нужно.

Однако, используя приведенную выше запись, похоже, что список кортежей является кортежем.Это должно быть мешком для правильной работы.

Вместо:

(123, ( (1, 2), (3, 4) ) )
(666, ( (8, 9), (10, 11), (3, 4) ) )

Вы должны представлять свои данные как:

(123, { (1, 2), (3, 4) } )
(666, { (8, 9), (10, 11), (3, 4) } )

Затем, как толькоэту форму вы можете сделать:

O = FOREACH grouped GENERATE $0, FLATTEN($1);
...