Некоторые задачи Airflow автоматически отключаются.
Я использую Airflow версии 1.10.6 с Celery Executor. База данных - PostgreSQL, а Брокер - Redis. Инфраструктура воздушного потока развернута на Azure.
Немногие задачи отключаются через 15 часов, немногие останавливаются через 30 минут. Это длительные задачи, я установил для параметра execute_timeout значение 100 часов.
Любая конфигурация, которая может помешать отключению этих задач с помощью Airflow?
{local_task_job.py:167} WARNING - State of this instance has been externally set to shutdown. Taking the poison pill.