Проблема инициирования задачи воздушного потока

Question

Мы используем более 150 мешков в нашей производственной среде и часто сталкиваемся с проблемами при запуске задач.Мы запускаем airflow 1.7.2 с локальным режимом исполнения, размещенным в Google Compute Engine, Cloudsql в качестве нашей метаданной.

Как решить эту проблему?Я обновил воздушный поток до 1.8.2, но не повезло.Для временного решения мы меняем имя dag и дату начала, чтобы решить эту проблему.но это не решение проблемы.какое решение для этой проблемы?и почему это происходит?

Answer 1

Кажется, что планировщик воздушного потока и веб-сервер работают нормально, но есть проблема с рабочими воздушного потока.Если вы просмотрите рабочий журнал воздушного потока, вы можете увидеть там ошибку.