Google Cloud Data Fusion + CI / CD для конвейеров данных - PullRequest
0 голосов
/ 14 февраля 2020

Я только начинаю работать с GCP и Google Cloud Data Fusion. Только что просмотрел вступительное видео. Я вижу, что трубопроводы можно экспортировать. Мне было интересно, как мы можем продвигать конвейер, скажем, от Dev до Prod env? Я предполагаю, что после некоторого тестирования экспортированный файл копируется в ветку Prod на Git, откуда нам нужно вызвать API для его развертывания? Кроме того, как насчет деталей подключения, как мы можем избежать жесткого кодирования конфигураций и учетных данных источника / назначения?

Ответы [ 2 ]

0 голосов
/ 28 февраля 2020

По первому вопросу: если у вас есть разные среды для разработки и производства, вы можете экспортировать свой конвейер и импортировать его в правильной среде. Я не очень хорошо понял второй вопрос. В официальных плагинах Data Fusion есть стандартный способ предоставить свои учетные данные. Если вам нужен лучший ответ, пожалуйста, объясните немного более внимательно свои сомнения.

0 голосов
/ 18 февраля 2020

Да. Вам придется экспортировать и повторно импортировать трубопровод.

...