Композитор с автоматическим масштабированием?

Question

Учитывая, что GCP composer работает с GKE / GCE, это автоматическое масштабирование?Теперь у меня есть 3 узла в кластере, скажем, 100 DAG.

Позже, если у меня будет около 300 DAG, он будет масштабироваться сам (с работниками сельдерея)?

Answer 1

В настоящее время мы не поддерживаем автоматическое масштабирование, но оно включено в нашу дорожную карту.Однако вы можете вручную увеличить / уменьшить кластер GKE, обновив значение nodeCount .

Answer 2

На данном этапе нет автоматического масштабирования, но я ожидаю, что оно находится в дорожной карте.

Астроном работает над автоматическим масштабированием сервиса Airflow с использованием Kubernetes, вероятно, он запустится примерно в то время, когда Google Composer запустит автоматическое масштабирование ... так чтонаступают хорошие времена:)