Бобы застряли в состоянии PodInitializing на неопределенное время

Question

У меня есть cronjob k8s, который состоит из контейнера init и контейнера с одним модулем.Если происходит сбой контейнера инициализации, Pod в основном контейнере никогда не запускается и остается в «PodInitializing» неопределенно долго.

Мое намерение состоит в том, чтобы задание не выполнялось в случае сбоя контейнера init.

---
apiVersion: batch/v1beta1
kind: CronJob
metadata:
  name: job-name
  namespace: default
  labels:
    run: job-name
spec:
  schedule: "15 23 * * *"
  startingDeadlineSeconds: 60
  concurrencyPolicy: "Forbid"
  successfulJobsHistoryLimit: 30
  failedJobsHistoryLimit: 10
  jobTemplate:
    spec:
      # only try twice
      backoffLimit: 2
      activeDeadlineSeconds: 60
      template:
        spec:
          initContainers:
          - name: init-name
            image: init-image:1.0
          restartPolicy: Never
          containers:
          - name: some-name
            image: someimage:1.0
          restartPolicy: Never

kubectl на застрявшей капсуле приводит к:

Name:               job-name-1542237120-rgvzl
Namespace:          default
Priority:           0
PriorityClassName:  <none>
Node:               my-node-98afffbf-0psc/10.0.0.0
Start Time:         Wed, 14 Nov 2018 23:12:16 +0000
Labels:             controller-uid=ID
                    job-name=job-name-1542237120
Annotations:        kubernetes.io/limit-ranger:
                      LimitRanger plugin set: cpu request for container elasticsearch-metrics; cpu request for init container elasticsearch-repo-setup; cpu requ...
Status:             Failed
IP:                 10.0.0.0
Controlled By:      Job/job-1542237120
Init Containers:
init-container-name:
    Container ID:  docker://ID
    Image:         init-image:1.0
    Image ID:      init-imageID
    Port:          <none>
    Host Port:     <none>
    State:          Terminated
      Reason:       Error
      Exit Code:    1
      Started:      Wed, 14 Nov 2018 23:12:21 +0000
      Finished:     Wed, 14 Nov 2018 23:12:32 +0000
    Ready:          False
    Restart Count:  0
    Requests:
      cpu:        100m
    Environment:  <none>
    Mounts:
      /var/run/secrets/kubernetes.io/serviceaccount from default-token-wwl5n (ro)
Containers:
  some-name:
    Container ID:  
    Image:         someimage:1.0
    Image ID:      
    Port:          <none>
    Host Port:     <none>
    State:          Waiting
      Reason:       PodInitializing
    Ready:          False
    Restart Count:  0
    Requests:
      cpu:        100m
    Environment:  <none>
    Mounts:
      /var/run/secrets/kubernetes.io/serviceaccount from default-token-wwl5n (ro)
Conditions:
  Type              Status
  Initialized       False 
  Ready             False 
  ContainersReady   False 
  PodScheduled      True

Answer 1

Я думаю, что вы можете пропустить, что это ожидаемое поведение контейнеров init.Правило состоит в том, что в случае сбоя initContainers Pod не будет перезапущен, если для restartPolicy установлено значение Never, иначе Kubernetes продолжит перезапускать его до тех пор, пока это не удастся.

Также:

В случае сбоя контейнера инициализации Pod в основном контейнере никогда не запускается и остается в «PodInitializing» бесконечно.

Согласно документации :

Модуль не может быть готов, пока все начальные контейнеры не будут выполнены успешно.Порты в контейнере инициализации не агрегированы в службе.Модуль, который инициализируется, находится в состоянии ожидания, но должен иметь условие Инициализация, установленную в значение true.

* Я вижу, что вы пытались изменить это поведение, но я не уверен, что вы можете сделатьчто с CronJob я видел примеры с Джобсом.Но я просто теоретизирую, и если этот пост не помог вам решить вашу проблему, я могу попытаться воссоздать ее в лабораторной среде.

Answer 2

Поскольку вы уже выяснили, что initcontainers предназначены для успешного завершения до конца. Если вы не можете избавиться от init-контейнеров, то в этом случае я бы хотел убедиться, что init-контейнер все время успешно завершается. Результат контейнера init может быть записан в томе emptydir, что-то вроде файла состояния, совместно используемом как контейнером init, так и вашим рабочим контейнером. Я бы поручил рабочему контейнеру решить, что делать в случае неудачного завершения контейнера init.

Answer 3

Чтобы попытаться это выяснить, я бы запустил команду:

kubectl get pods - Добавить параметр пространства имен, если необходимо.

Затем скопировать имя модуля и запустить:

kubectl describe pod {POD_NAME}

Это должно дать вам некоторую информацию о том, почему он застрял в состоянии инициализации.