Prometheus Alert / Rule для DISK (IOPs, задержка чтения / записи; загрузка) уместно? - PullRequest
Новая
       10

Prometheus Alert / Rule для DISK (IOPs, задержка чтения / записи; загрузка) уместно?

0 голосов
/ 05 декабря 2018

Я не уверен, что эти правила нормальны из-за полученных результатов.Пожалуйста, кто-нибудь может сказать мне, если выглядит хорошо, или у вас есть лучшее предложение?Я наблюдаю при загрузке шаблона интервала 7 часов> 6, и это немного странно.

Загрузка 

alert: instance_load
expr: node_load5{instance=~".*:9100"} > 6
for: 1m
labels:
severity: critical
annotations:
description: 'On {{ $labels.job }} system Load average is too High: {{ $value }}.'
monitor: ""
runbook: ""
summary: '{{ $labels.job }} System Load is too High.'

Задержка диска R / W 

alert: instance_disk_read_latency
expr: (rate(node_disk_read_time_seconds_total[5m]) / rate(node_disk_reads_completed_total[5m])) > 0.015
for: 5m
labels:
severity: warning
annotations:
description: 'High read latency observed for device: {{ $labels.device }} with a
value of: {{ humanizeDuration $value }} on node: {{ $labels.alias }}. The average
value of the Avg. Disk sec/Read performance counter should be under 10 milliseconds.
The maximum value of the Avg. Disk sec/Read performance counter should not exceed
50 milliseconds.'
monitor: ""
runbook: ""
severity: warning
summary: 'High read latency observed for device: {{ $labels.device }} on: {{ $labels.alias
}}.'

alert: instance_disk_write_latency
expr: (rate(node_disk_write_time_seconds_total[5m]) / rate(node_disk_writes_completed_total[5m])) > 0.015
for: 5m
labels:
severity: warning
annotations:
description: 'High write latency observed for device: {{ $labels.device }} with
a value of: {{ humanizeDuration $value }} on node: {{ $labels.alias }}.'
monitor: ""
runbook: ""
severity: warning
summary: 'High write latency observed for device: {{ $labels.device }} on: {{ $labels.alias
}}.'

Дисковые операции ввода-вывода

 alert: instance_disk_iops
    expr: sum by(alias, env) (rate(node_disk_reads_completed_total[5m]) + rate(node_disk_writes_completed_total[5m])) > 500
    for: 5m
    labels:
    severity: warning
    annotations:
    description: 'Server Disk IOPs {{ $labels.alias }} has a value of: {{ humanize
    $value }} over > 500 I/O ops/sec (IOPs).'
    monitor: ""
    runbook: ""
    summary: '{{ $labels.job }} Server Disk IOPs over 500 I/O ops/sec (IOPs).'

С уважением,

...