У меня есть 2 рабочих потока воздуха, каждый на машине. На машине A выполняется задача датчика файла, а на машине B - задача rsync (копирует файлы из A в B), а также другая задача датчика файла для скопированных файлов. Иногда задача rsync не выполняется без попытки выполнения и не создает файл журнала. Правило триггера задач: all_done и airflow v1.9
Задачи датчика используют xcom_push и xcom_pull, которые я отключил, но такая же проблема возникает:
-[ RECORD 3 ]---+-----------------------------------------------------
task_id | task_name (rsync)
dag_id | dag_name
execution_date | 2019-10-08 19:30:00
start_date |
end_date | 2019-10-08 20:20:21.649662
duration |
state | failed
try_number | 0
hostname |
unixname | nio
job_id |
pool | pool_name
queue | queue name of machine B
priority_weight | 3
operator |
queued_dttm | 2019-10-08 20:20:20.550397
pid |
max_tries | 3
оператор равен нулю, повторная попытка равна 0 исостояние не удалось
Ожидается, что задача rsync будет запущена.