Друзья, подскажите пожалуйста с PromQL - хочу в графане построить график который будет меняться в зависимости от $__range

Есть gauge который каждый день достигает Х и на следующий день сбрасывается в 0
Соответственно хочу посчитать сумму максимумов в периоде времени заданным в $__range

Данные из Prometheus

max_over_time( sum(mymetric{instance=~"foobar.*"})[7d:1d] )

но не уверен

с гранулярностью наверн облажался

но куда то в эту сторону надо воевать

А разве не наоборот sum( max_over_time(...) ) ?

Нашёл два таких же абсолютно вопроса, но там не Prometheus

https://community.grafana.com/t/sum-of-max-value-of-a-day-for-a-period-of-time/20181
https://community.grafana.com/t/sum-the-max-value-of-every-day-in-grafana/16522

Теперь вот это бы в PromQL

Нашел. Спасибо

А такой вопрос - можно ли как-то динамически подбрасывать правила роутинга для алертманагера? Ну чтобы не основной конфиг редачить, а добавлять конфигмапы/секреты и инклудить их в основной конфиг?
Собственно почему так - у нас много динамических окружений, хотим заботу о них (реагирование на алерты) переложить на плечи того, кто евойный создатель и чтобы уведомления шли только ему и на спец ящик. А так как это все хуяк-хуяк и в прод, то хочется чтобы роутинг на основании владельца был динамически изменяемым

попробуйте вот так - max_over_time(max_over_time(m[1d])[$__range:1d])

упс, там не сумма

тогда внешний max_over_time нужно заменить на sum_over_time

Ага

sum_over_time(max_over_time(m[1d])[7d:1d]) - как-то так

Спасибо! Работает!

Всем привет!!

Подскажите, пожалуйста, может ли Prometheus+Alertmanager хранить историю о срабатываемых триггерах?

сам по себе - нет. но можно зарядить в прометей ваш запрос алертменеджера и увидеть все сработавшие алерты ретроспективно

спасибо

рейд прошел? =)