Использовать S3 для метастазирования по ВИЧ?

Question

Я настраиваю S3 в качестве хранилища данных для Hive.Тем не менее, я не уверен, может ли часть Hive 'metastore' использовать S3 в качестве хранилища или нет.

Большинство учебных пособий (например, https://data -flair.training / blogs / apache-hive-metastore / ) отметим, что metastore поддерживает только Derby и несколько других RDBMS.

Это правда?Конфигурирование metastore для использования s3 в качестве хранилища звучит для меня как простое изменение конфигурации.

Answer 1

Hive Metastore сохраняет метаданные для таблиц и разделов Hive. Он поддерживается реляционной базой данных, и в настоящее время поддерживаются MySQL, Postgres, Oracle и MS SQL Server . S3 - это хранилище объектов , а не реляционная база данных.

Это ER-диаграмма , показывающая различные таблицы, столбцы и ограничения, хранящиеся в Has Metastore.