Sqoop: --as-parquetfile не работает - PullRequest
       75

Sqoop: --as-parquetfile не работает

0 голосов
/ 28 августа 2018

Я хочу сохранить файлы sqoop в виде файла паркета непосредственно в hdfs. я пытаюсь ниже команды сделать это. но лицом ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.NullPointerException

версия sqoop - 1.4.7

sqoop import --options-file /home/user/optionsfile.txt --query "select * из таблицы, где \ $ CONDITIONS "--target-dir 'hdfs: /// user / x / sqoop1' --as-parquetfile -m 1;

при попытке выполнить ту же команду sqoop без --as-parquetfile задание успешно выполняется

Ответы [ 2 ]

0 голосов
/ 30 августа 2018

Поскольку это открытая ошибка в sqoop, я хотел бы предложить вам сначала импортировать данные во временную таблицу кустов в текстовом формате, а затем вставить в другую таблицу кустов в формате parquete.

0 голосов
/ 29 августа 2018

Можете ли вы попробовать --table вместо --query и проверить.

Существует открытая ошибка SQOOP-2571 для этой проблемы.

...