Альтернатива NLinesInputFormat в Hadoop 0,20?

Question

Я работаю с Hadoop 0.20 и хочу использовать NLinesInputFormat, но эта функциональность отсутствует?

Есть ли альтернатива?

Вот что я пытаюсь сделать:

Записи в данных охватывают несколько строк, поэтому я должен установить для NLinesInputFormat значение, кратное k, где k - количество строк, которое занимает каждая запись.

Любая помощь будет оценена.

Answer 1

NLineInputFormat (это строка, а не линии) в 0,20.Новый API-интерфейс MR был представлен в 0.20, но NLineInputFormat не был перенесен в новый API.

Если вы используете новый API-интерфейс MR, то вы можете попробовать перенести новый API NLineInputFormat из некоторого другого выпуска в 0.20.Это не должно быть так сложно, и вы также научитесь компилировать и создавать Jad-файл Hadoop.