Где работает веб-сервер Airflow в Google Composer?

Question

У меня есть следующие модули:

NAME                                                        READY     STATUS      RESTARTS   AGE
airflow-database-init-job-ggk95                             0/1       Completed   0          3h
airflow-redis-0                                             1/1       Running     0          3h
airflow-scheduler-7594cd584-mlfrt                           2/2       Running     9          3h
airflow-sqlproxy-74f64b8b97-csl8h                           1/1       Running     0          3h
airflow-worker-5fcd4fffff-7w2sg                             2/2       Running     0          3h
airflow-worker-5fcd4fffff-m44bs                             2/2       Running     0          3h
airflow-worker-5fcd4fffff-mm55s                             2/2       Running     0          3h
composer-agent-0034135a-3fed-49a6-b173-9d3f9d0569db-ktwwt   0/1       Completed   0          3h
composer-agent-0034135a-3fed-49a6-b173-9d3f9d0569db-nmjvw   0/1       Error       0          3h
composer-agent-d043348f-025a-4aa1-89b4-d4a5fae91653-8zdwk   0/1       Completed   0          3h
composer-fluentd-daemon-grwsp                               1/1       Running     0          3h
composer-fluentd-daemon-rxhjc                               1/1       Running     0          3h
composer-fluentd-daemon-xxrmr                               1/1       Running     0          3h

Я не знаю, какие из них являются модулями веб-сервера.airflow-worker это, вероятно, не веб-сервер, верно?Я хочу ткнуть его, чтобы проверить, работает ли он должным образом, потому что, кажется, нет.

Answer 1

Как объясняется в документации по Архитектура Cloud Composer , веб-сервер Airflow работает в гибкой среде App Engine, размещенной в управляемом Google проекте клиента, к которому у пользователей нет доступа.

К сожалению, журналы веб-сервера не пересылаются в основной проект Composer (т. Е. В ваш проект), хотя есть открытый запрос на добавление функций в трекере открытых вопросов , поэтому не стесняйтесь нажимать на значок звезды ипрокомментируйте его, чтобы инженеры Composer узнали о важности этой функции и о вашем случае использования.Поэтому, если вы считаете, что у вас есть другие подобные проблемы, касающиеся самого веб-сервера, я рекомендую вам либо связаться со службой поддержки (если вы имеете на это право), либо открыть проблему в соответствующей публичной проблеме.Tracker , чтобы ваша проблема могла быть исследована группой поддержки GCP.

Если вы хотите узнать больше о веб-сервере Airflow, вы можете найти дополнительную информацию на его странице документации тоже.