Пользовательский формат ввода для обработки protobufs в hadoop 0.20 - PullRequest
1 голос
/ 10 марта 2011

Я бы хотел обработать protobufs с помощью hadoop .... но не уверен, с чего начать. Меня не волнует расщепление больших файлов. Протобуфы хранятся в виде двоичных данных ... какой класс я должен расширить, чтобы было легче

1 Ответ

1 голос
/ 10 марта 2011

Слон-птица может обрабатывать протобуфы с помощью hadoop. Эта структура генерирует классы ввода-вывода hadoop вместе с обычными классами protobuf. Использует сжатие lzo.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...