Мы на Кубе v1.13.10.У нас есть ~ 500 узлов в кластере.Недавно я начал получать уведомления о DiskPressure от мастеров.После некоторых проверок мы выяснили, что причиной были логи kube-планировщика.Их размер увеличился до ~ 20 ГБ каждый, и их может быть 5.И главный экземпляр имел только 80 ГБ дискового пространства.
Logrotate настроен для работы каждый час с отложенным сжатием (настройки kops по умолчанию).Журналы в основном заполнены такими сообщениями
E0929 00:34:27.778731 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.778734 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.778738 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.778742 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.782052 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.782068 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.782073 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.782079 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
E0929 00:34:27.782083 1 predicates.go:1277] Node not found, ip-10-0-0-1.ec2.internal
Я увеличил размер диска для мастера.Но почему так много сообщений об ошибках?За 1 час было сгенерировано 20 ГБ журналов, я думаю, что это немного экстремально.Как я могу избежать этого?