Воздушный поток - наличие нескольких крючков S SH для динамически создаваемого DAG - PullRequest
0 голосов
/ 14 апреля 2020

У меня есть динамический тег c, который раскручивает отдельный экземпляр EC2 для обработки некоторых данных на основе файла конфигурации. Скажем, у меня есть конвейер A с экземпляром A EC2 и конвейер B с экземпляром EC2 B.

Я хотел бы войти в каждый экземпляр EC2, чтобы иметь возможность копировать файлы, выполнять код и т. Д. c. Я могу сделать это с помощью одного тега, используя ssh_hook, который позволяет мне войти в систему.

Как мне расширить это до динамического c dag? Итак, иметь несколько ssh_hooks и иметь возможность вызывать правильный хук для правильного экземпляра конвейера / EC2?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...