Общий файл DAG для выполнения нескольких заданий - PullRequest
1 голос
/ 07 января 2020

У меня есть 20 bash скриптов. Некоторые запускаются каждую минуту, каждый день, а некоторые - каждый час, используя cron. Теперь мне нужно мигрировать в потоке воздуха. Для этого, согласно концепции воздушного потока, мне нужно создать еще 20 файлов (файл DAG).

Обеспечивает ли поток воздуха создание универсального шаблона c dag, который может выполнять все сценарии bash в указанное время расписания с другим идентификатором dag?

Я получил ссылку - Динамический поток воздуха c DAG и идентификаторы задач Но я сомневаюсь, это правильный путь или нет?

1 Ответ

0 голосов
/ 07 января 2020

Вы можете создать 3 DAGS:

  • DAG, запланированный каждую минуту
  • ежечасно запланированный DAG
  • ежедневный запланированный DAG.

Под этими DAGS создайте задачи для выполнения ваших соответствующих сценариев.

...