Механизм запросов Presto с озером данных Azure

Question

У меня есть требование для развертывания сервера Presto, который может помочь мне запрашивать данные, хранящиеся в ADLS в форматах файлов Avro.Я прошел этот урок и похоже, что Hive используется как каталог / соединитель в preto для запроса из ADLS.Можно ли обойти Hive и иметь какой-либо соединитель для извлечения данных из ADLS?

Answer 1

Можно ли обойти Hive и иметь какой-либо разъем для извлечения данных из ADLS?

Нет.

Улей здесь играет две роли:

• хранилище для метаданных.Он содержит такую ​​информацию, как:
  • схема и имя таблицы
  • столбцы
  • формат данных
  • расположение данных
• выполнение
  • способен считывать данные из (HDFS) распределенных файловых систем (таких как HDFS, S3, ADLS)
  • сообщает, как может быть распределено выполнение.