Как прочитать данные подкаталога в таблицу bigsql? - PullRequest
Новая
       17

Как прочитать данные подкаталога в таблицу bigsql?

0 голосов
/ 10 апреля 2019

Bigsql не может читать данные из подкаталога, как улей hive, путем установки параметров. 

set tblproperties (
    "hive.input.dir.recursive" = "TRUE",
    "hive.mapred.supports.subdirectories" = "TRUE",
    "hive.supports.subdirectories" = "TRUE",
    "mapred.input.dir.recursive" = "TRUE")

Я попытался добавить вышеуказанные параметры в свойства таблиц bigsql, но он не может прочитать данные подкаталога.

Какие параметры мне нужно установить в bigsql для чтения данных подкаталога?

1 Ответ

0 голосов
/ 10 апреля 2019

Насколько я понимаю, Bigsql ищет только файлы в родительском каталоге. Это даже не беспокоит проверку подкаталогов. Он отобразит пустую таблицу, потому что не может рекурсивно прочитать данные. Эта функция все еще находится в стадии разработки идей по улучшению продукта с командой разработчиков и разработчиков IBM.

...