Prometheus предупреждения не peding/запала на второй раз

Question

У меня есть это простой Prometheus предупреждение сконфигурировано

ALERT MyServiceDown 
    IF my_custom_metric == 0 
    FOR 15s 

Сценария выглядит следующим образом:

1. При правильном выполнении my_custom_metric является 1, а MyServiceDown предупреждение зеленый на вкладке «Предупреждение».
2. Затем я устанавливаю my_custom_metric 0, а Propetheus извлекает его как 0, который я вижу на вкладке «График -> Консоль».
3. MyServiceDown немедленно становится ожидающим (желтый) и через 15 секунд становится стрельбой (красный).
4. Затем я исправил ошибку, my_custom_metric снова 1, а оповещение MyServiceDown - зеленое.

Здесь странная часть. Я прерываю приложение второй раз, так что my_custom_metric снова 0. Он отображается в Graph -> Console. Но оповещение MyServiceDown никогда не ожидало или не срабатывало. Когда я перезапускаю Прометей, все работает хорошо, но только один раз.

Что я делаю неправильно?

Answer 1

Существовал ошибка в версии 0.17rc1

https://github.com/prometheus/prometheus/issues/1372

Он фиксируется в 0.17rc2

Проблема решена.