Не удалось убедиться, что установлен ip: & {{KUBE-NODE-PORT-TCP ...} существует, ошибка: ошибка при создании ipset KUBE-NODE-PORT-TCP, ошибка: состояние выхода 2 - PullRequest
Новая
       18

Не удалось убедиться, что установлен ip: & {{KUBE-NODE-PORT-TCP ...} существует, ошибка: ошибка при создании ipset KUBE-NODE-PORT-TCP, ошибка: состояние выхода 2

0 голосов
/ 04 июля 2018

версия kubernetes: v1.11.0

Я запускаю kube-proxy в режиме ipvs, получаю следующие ошибки: 

7月 03 21:55:08 docker02 kube-proxy[13003]: E0703 21:55:08.316098   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-NODE-PORT-TCP bitmap:port inet 1024 65536 0-65535 Kubernetes nodeport TCP port for masquerade purpose} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-NODE-PORT-TCP, error: exit status 2
7月 03 21:55:13 docker02 kube-proxy[13003]: E0703 21:55:13.205413   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-NODE-PORT-UDP bitmap:port inet 1024 65536 0-65535 Kubernetes nodeport UDP port for masquerade purpose} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-NODE-PORT-UDP, error: exit status 2
7月 03 21:55:18 docker02 kube-proxy[13003]: E0703 21:55:18.233756   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-LOAD-BALANCER-LOCAL hash:ip,port inet 1024 65536 0-65535 Kubernetes service load balancer ip + port with externalTrafficPolicy=local} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-LOAD-BALANCER-LOCAL, error: exit status 2
7月 03 21:55:23 docker02 kube-proxy[13003]: E0703 21:55:23.256248   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-CLUSTER-IP hash:ip,port inet 1024 65536 0-65535 Kubernetes service cluster ip + port for masquerade purpose} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-CLUSTER-IP, error: exit status 2
7月 03 21:55:28 docker02 kube-proxy[13003]: E0703 21:55:28.271973   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-LOAD-BALANCER-SOURCE-CIDR hash:ip,port,net inet 1024 65536 0-65535 Kubernetes service load balancer ip + port + source cidr for packet filter purpose} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-LOAD-BALANCER-SOURCE-CIDR, error: exit status 2
7月 03 21:55:33 docker02 kube-proxy[13003]: E0703 21:55:33.285863   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-LOAD-BALANCER-SOURCE-CIDR hash:ip,port,net inet 1024 65536 0-65535 Kubernetes service load balancer ip + port + source cidr for packet filter purpose} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-LOAD-BALANCER-SOURCE-CIDR, error: exit status 2
7月 03 21:55:36 docker02 kube-proxy[13003]: I0703 21:55:36.485507   13003 proxier.go:701] Stale udp service kube-system/kube-dns:dns -> 10.254.0.2
7月 03 21:55:36 docker02 kube-proxy[13003]: E0703 21:55:36.535070   13003 ipset.go:156] Failed to make sure ip set: &{{KUBE-NODE-PORT-LOCAL-UDP bitmap:port inet 1024 65536 0-65535 Kubernetes nodeport UDP port with externalTrafficPolicy=local} map[] 0xc4205e5e40} exist, error: error creating ipset KUBE-NODE-PORT-LOCAL-UDP, error: exit status 2

Согласно исходному коду, я создал команду вручную, например: 

sudo ipset create KUBE-LOAD-BALANCE-LOCAL hash:ip,port family inet hashsize 1024 maxelem 65535 -exist

и все в порядке ， и я могу получить информацию о ipset, например: 

[k8s@docker02 ds]$ sudo ipset list
Name: KUBE-LOAD-BALANCE-LOCAL
Type: hash:ip,port
Revision: 2
Header: family inet hashsize 1024 maxelem 65535
Size in memory: 16528
References: 0
Members:

Понятия не имею об этой проблеме.

1 Ответ

0 голосов
/ 05 июля 2018

После запуска kube-proxy в режиме ipvs соответствующие записи ipset будут созданы автоматически.

Похоже, что ipset с именем KUBE-LOAD-BALANCE-LOCAL уже существует в системе, когда вы пытаетесь запустить kube-proxy в режиме ipvs.

Попробуйте удалить запись ipset KUBE-LOAD-BALANCE-LOCAL и после этого запустите kube-proxy в режиме ipvs.

Чтобы удалить запись ipset, вы можете использовать следующую команду:

ipset destroy KUBE-LOAD-BALANCE-LOCAL

Обновление:

@ DaveMcNeill прав. Это известная ошибка в системах RedHat / CentOS.

Это было исправлено в Kubernetes следующим коммитом:

исправление сбоя создания ipset на centos. выпуск 65461

В этом случае вам следует дождаться выпуска с включенной фиксацией или использовать другую ОС (например, Debian).

...