Я использую простой сервер RWX NFS в своем кластере Kubernetes в GKE и установил диаграмму Prometheus Operator Helm. Прометей получает много данных из различных источников метрик в кластере k8s, включая kubelet. К сожалению, он не возвращает значение kubelet_volume_stats_available_bytes
для всех доступных PV C в кластере.
Когда я смотрю в Prometheus, он сообщает статистику для PV / PV C Настройка Kafka, которые являются экземплярами gce-pd:
$ ssh gke-prometheus-dev-k8s-standard-0e601273-tklt
gke-prometheus-dev-k8s-standard-0e601273-tklt ~ $ curl -SsL localhost:10255/metrics | grep kubelet_volume_stats_available_bytes
# HELP kubelet_volume_stats_available_bytes Number of available bytes in the volume
# TYPE kubelet_volume_stats_available_bytes gauge
kubelet_volume_stats_available_bytes{namespace="default",persistentvolumeclaim="datadir-kafka-0"} 1.042683904e+10
kubelet_volume_stats_available_bytes{namespace="default",persistentvolumeclaim="datadir-kafka-1"} 1.04267776e+10
kubelet_volume_stats_available_bytes{namespace="default",persistentvolumeclaim="datadir-kafka-2"} 1.0426851328e+10
$ ssh gke-prometheus-dev-k8s-standard-0e601273-0tzf
gke-prometheus-dev-k8s-standard-0e601273-0tzf ~ $ curl -SsL localhost:10255/metrics | grep kubelet_volume_stats_available_bytes
$
При подключении к различным узлам в кластере и запросе к серверу метрик kubelet отображаются вышеуказанные ответы, которые совпадают с тем, что Прометей показывает мне.
Запрос кластера с помощью kubectl
возвращает следующее:
$ kubectl get pv,pvc
NAME CAPACITY ACCESS MODES RECLAIM POLICY STATUS CLAIM STORAGECLASS REASON AGE
persistentvolume/nfs-file-store 10Gi RWX Retain Bound default/nfs-file-store 13m
persistentvolume/nfs-logs 10Gi RWX Retain Bound default/nfs-logs 13m
persistentvolume/pvc-93464537-0f1c-448a-841c-18ce5645e076 10Gi RWO Delete Bound default/datadir-kafka-2 standard 4d20h
persistentvolume/pvc-bbbece3f-cafe-4fed-82cb-255b85e79c2d 10Gi RWO Delete Bound default/datadir-kafka-0 standard 4d21h
persistentvolume/pvc-f0ce3653-42b3-4fce-9b55-121505ddceb5 10Gi RWO Delete Bound default/datadir-kafka-1 standard 4d20h
NAME STATUS VOLUME CAPACITY ACCESS MODES STORAGECLASS AGE
persistentvolumeclaim/datadir-kafka-0 Bound pvc-bbbece3f-cafe-4fed-82cb-255b85e79c2d 10Gi RWO standard 4d21h
persistentvolumeclaim/datadir-kafka-1 Bound pvc-f0ce3653-42b3-4fce-9b55-121505ddceb5 10Gi RWO standard 4d20h
persistentvolumeclaim/datadir-kafka-2 Bound pvc-93464537-0f1c-448a-841c-18ce5645e076 10Gi RWO standard 4d20h
persistentvolumeclaim/nfs-file-store Bound nfs-file-store 10Gi RWX 13m
persistentvolumeclaim/nfs-logs Bound nfs-logs 10Gi RWX 13m
Любые указатели на то, почему kubelet не видит эти диски?