Как заставить Hive работать с bz2?

Question

Поскольку bz2 разделяется и экономит место, я планирую хранить данные таблицы в формате bzip2. Однако кажется, что он не распознает сжатый формат. Это было хорошо с форматом GZIP. Код, который я использовал, выглядит следующим образом:

CREATE TABLE IF NOT EXISTS image_bzip (
    image_id STRING,
    image_feature STRING, 
    other_stuff STRING)
ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE LOCATION '/hivestore/bzip';

LOAD DATA LOCAL INPATH '/nfs/directory/*.bz2' OVERWRITE INTO TABLE image_bzip;

Может кто-нибудь указать мне, что мне не хватает?

Спасибо.

Answer 1

почему бы вам не попробовать создать внешнюю таблицу со сжатыми файлами bz2 в HDFS?

Answer 2

, если мы правильно установили кодек сжатия, он работает нормально.