Apache Airflow (и, следовательно, Cloud Composer) предназначен для организации рабочих процессов, а не для пакетных заданий ETL, которые требуют только временных вычислительных ресурсов.Аналогично тому, как вы не отключите сервер только потому, что запланированная задача cron не выполняется, среды Composer предназначены для длительных вычислительных ресурсов, которые всегда подключены к сети, так что вы можете планировать повторяющиеся рабочие процессы при необходимости (будь тов секунду, ежедневно и т. д.)
В реальном производственном случае среду Composer всегда следует оставлять включенной, иначе группы DAG не будут запланированы, когда она не работает.Если у вас есть среда разработки и вы хотите сэкономить, вы можете изменить размер присоединенного кластера GKE среды Composer на 0 узлов, чтобы вам не выставляли счета за них.Точно так же, если вы считаете, что у вас недостаточно групп обеспечения доступности баз данных, чтобы оправдать затраты, рассмотрите возможность использования машин меньшего размера.