Prometheus Docker не запускается с `Template: (dynamic): parse: template:: 10: неопределенная переменная" $ tags "`

Question

Я пытаюсь запустить Прометея на Кочевнике. Все выглядит хорошо, но когда я добавляю правило оповещения с шаблонами в annotations, оно не срабатывает.

вот простое правило оповещения:

groups:
- name: alertmanager.rules
  rules:
  - alert: AlertmanagerDown
    expr: up{job="alertmanager"} == 0
    for: 1s
    labels:
      severity: critical
    annotations:
      description: 'Alertmanager on {{ $labels.role }} instance {{ $labels.node }} has not produced any metrics for 5 minutes'
      summary: 'Alertmanager is down on {{ $labels.role }} instance {{ $labels.node }}'

Сбой контейнера с Template: (dynamic): parse: template: :10: undefined variable "$labels"

Если я удаляю раздел annotations, он запускается без проблем.

Answer 1

Пришлось установить left_delimiter и right_delimiter на что-то отличное от {{ и }} https://www.nomadproject.io/docs/job-specification/template.html#left_delimiter