Отсутствие постоянных метрик Прометея в Куберне - PullRequest
Новая
       24

Отсутствие постоянных метрик Прометея в Куберне

0 голосов
/ 30 мая 2019

Я собираю метрики Prometheus из приложения uwsgi, размещенного в Kubernetes, метрики не сохраняются после удаления модулей. Сервер Prometheus размещен в том же кластере kubernetes, и я назначил ему постоянное хранилище.

Как сохранить метрики от модулей даже после их удаления?

Ямл развертывания Prometheus: 

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: prometheus
  namespace: default
spec:
  replicas: 1
  template:
    metadata:
      labels:
        app: prometheus
    spec:
      containers:
        - name: prometheus
          image: prom/prometheus
          args:
            - "--config.file=/etc/prometheus/prometheus.yml"
            - "--storage.tsdb.path=/prometheus/"
            - "--storage.tsdb.retention=2200h"
          ports:
            - containerPort: 9090
          volumeMounts:
            - name: prometheus-config-volume
              mountPath: /etc/prometheus/
            - name: prometheus-storage-volume
              mountPath: /prometheus/
      volumes:
        - name: prometheus-config-volume
          configMap:
            defaultMode: 420
            name: prometheus-server-conf
        - name: prometheus-storage-volume
          persistentVolumeClaim:
            claimName: azurefile
---
apiVersion: v1
kind: Service
metadata:
  labels:
    app: prometheus
  name: prometheus
spec:
  type: LoadBalancer
  loadBalancerIP: ...
  ports:
    - port: 80
      protocol: TCP
      targetPort: 9090
  selector:
    app: prometheus

yaml для развертывания приложений: 


apiVersion: apps/v1
kind: Deployment
metadata:
  name: api-app
spec:
  replicas: 2
  selector:
    matchLabels:
      app: api-app
  template:
    metadata:
      labels:
        app: api-app
    spec:
      containers:
      - name: nginx
        image: nginx
        lifecycle:
          preStop:
            exec:
              command: ["/usr/sbin/nginx","-s","quit"]
        ports:
          - containerPort: 80
            protocol: TCP
        resources:
          limits:
            cpu: 50m
            memory: 100Mi
          requests:
            cpu: 10m
            memory: 50Mi
        volumeMounts:
          - name: app-api
            mountPath: /var/run/app
          - name: nginx-conf
            mountPath: /etc/nginx/conf.d
      - name: api-app
        image: azurecr.io/app_api_se:opencv
        workingDir: /app
        command: ["/usr/local/bin/uwsgi"]
        args:
          - "--die-on-term"
          - "--manage-script-name"
          - "--mount=/=api:app_dispatch"
          - "--socket=/var/run/app/uwsgi.sock"
          - "--chmod-socket=777"
          - "--pyargv=se"
          - "--metrics-dir=/storage"
          - "--metrics-dir-restore"
        resources:
          requests:
            cpu: 150m
            memory: 1Gi
        volumeMounts:
          - name: app-api
            mountPath: /var/run/app
          - name: storage
            mountPath: /storage
      volumes:
        - name: app-api
          emptyDir: {}
        - name: storage  
          persistentVolumeClaim:
            claimName: app-storage
        - name: nginx-conf
          configMap:
            name: app
      tolerations:
      - key: "sku"
        operator: "Equal"
        value: "test"
        effect: "NoSchedule"
---
apiVersion: v1
kind: Service
metadata:
  labels:
    app: api-app
  name: api-app
spec:
  ports:
    - port: 80
      protocol: TCP
      targetPort: 80
  selector:
    app: api-app

Ответы [ 2 ]

0 голосов
/ 02 июля 2019

Ваша проблема связана с неправильным типом контроллера, используемого для развертывания Prometheus.
В этом случае неправильный выбор контроллера развертывания (он предназначен для приложений без сохранения состояния, которым не требуется поддерживать какие-либо идентификаторы персистентности между переупорядочением модулей - как данные о постоянстве).

Вы должны переключиться на StatefulSet kind *, если вам требуется постоянство данных (метрики, удаленные Прометеем) в рамках Pod (пере) планирования.

* Так Prometheus развертывается по умолчанию с помощью prometheus-operator .

0 голосов
/ 30 мая 2019

При такой конфигурации для тома он будет удален, когда вы отпустите модуль. Вы в основном ищете документ PersistentVolumne, и пример .

Также проверьте, PersistentVolumeClaim .

...