Специальные задачи пропуска в Airflow - PullRequest
0 голосов
/ 05 сентября 2018

и я хотел бы понять, выполним ли мой сценарий использования в Airflow.

В целом, меня больше интересуют возможности Airflow по управлению потоками, а не планирование. Мы намерены использовать Airflow в качестве инфраструктуры управления потоком для внутреннего инструмента, который мы создаем, и в этом инструменте DAG будут запускаться вручную при необходимости.

Функция, которую я ищу, - это возможность начать выполнение с задачи X. Допустим, моя группа обеспечения доступности баз данных содержит 5 задач, большинство из которых я начну с первой, но иногда мне нужно будет начинать с 3-й, 2-й или любой другой задачи.

Вдобавок к этому - допустим, мой DAG (DAG_A) вызывает DAG другой команды (DAG_B) как часть ее выполнения. Смогу ли я начать выполнение со 2-го задания на DAG_B? Допустим, DAG_A выглядит так: задача1> задача2> DAG_B> задача3> задача4

Спасибо!

...