сценарий, основанный на каждом формате файла в кусте

Question

я новичок в Hadoop. Просто сейчас учусь посещать собеседования. Есть некоторые вопросы, которые были заданы в интервью, например, каков размер таблиц и каковы основные форматы файлов для него? сколько строк и т. д., которые не могут удовлетворить интервьюера. Пожалуйста, дайте мне знать любой сценарий, основанный на форматах файлов в Hadoop.

Answer 1

Улей не скажет вам размер стола.Вам необходимо суммировать каталоги HDFS, состоящие из таблицы.

Формат таблицы можно найти, описав ее.Если вы знали Hive, вы должны понимать, какую команду использовать для этого.

Аналогично, в HiveQL есть оператор подсчета SQL для получения количества строк.Формат файла не имеет значения