Могу ли я использовать Cloud Datapro c с внешним Hive Metastore? - PullRequest
3 голосов
/ 02 марта 2020

По умолчанию Cloud Datapro c запускает Hive Metastore, локальный для кластера Datapro c. Это означает:

  1. Метасторка является эфемерной с кластером

  2. Может быть больно иметь несколько кластеров, использующих один метастор

Можно ли направить кластеры Datapro c на одно метасторье Hive? Можно ли также использовать живое хранилище метастазов вне кластера, поэтому запуск кластера для метастаза не требуется?

1 Ответ

2 голосов
/ 02 марта 2020

Да, это возможно - кластеры могут использовать общее хранилище метаданных, работающее на Облако SQL.

Облако Datapro c Кластеры могут использовать это Облако SQL Прокси для подключения к внешнему SQL метастару. Перед использованием этого решения вам следует ознакомиться с важными примечаниями .

...