У Брайана есть пример, там вроде с несколькими метриками

а регать его можно только один раз)

Решай один раз и только значения туда пуляй

Но у меня не на все метрики ругается.

https://github.com/prometheus/client_python#custom-collectors
глянь

Спасибо. Гляну.

тут про метрики

Привет, всем!

Помогите понять, как работают настройки alertmanager group_wait, group_interval, repeat_interval.

Как я понимаю, по пришествию alert-а от Prometheus в alertmanager логика работы такова:
1. проверяется истек ли интервал repeat_interval - если нет, то alert считается resolved (разрешенным) и просто удаляется
2. проверяется истек ли интервал group_interval для группы, к которой относится alert - если нет, то alert добавляется в хранилище для этой группы и ждет, покуда интервал group_interval истечет, после чего выполняется отправка накопившихся alert-ов ответственному одним сообщением
3. проверяется истек ли интервал group_wait для группы, к которой относится alert - если нет, то alert добавляется в хранилище для этой группы и ждет, покуда интервал group_wait истечет, после чего выполняется отправка накопившихся alert-ов ответственному одним сообщением

Подскажите, правильно ли я понимаю?

repeat_interval если я правильно помню это время через которое будет отправлена нотификация об алерте если тот не перешел в статус resolve

а в статус resolve он переходит после того, как он перестает быть в статусе firing в прометее и в связи с этим прометей перестает отправлять алерт на алертменеджер?

https://github.com/stripe/veneur у кого есть что сказать по этому поводу?

Звёздочек норм можно брать

Го в прод, я создал

Ты мне с прошлого такого раза ssh ключ забыл обновить

Коллеги всем привет, подскажите плиз куда копнуть. Сегодня обсуждали с командой проблему мониторинга nginx и postgres при помощи prometheus.

Проблема такова: собираем метрики раз в 5 секунд. Происходит событие пиковое длительностью секунду-две и на графиках усредненных prometheus-ом этот пик очевидно может быть пропущен. Это может быть резкий скачок в нагрузке на хост запросами или в БД.
Есть ли какое-то решение? Собирать метрики локально (из access-логов например) и пушить напрямую в prometheus? Собирать обычным образом раз в секунду на мой взгляд не вариант, слишком накладно.

собираешь агрегаты (гистограммы) и будет видно

этот пик не может быть пропущен, если собираются каунтеры

Можно чуть подробнее, почему? Если я правильно понимаю схему работы pull, то мы раз в 5 сек собираем текущие значения и можем пропустить таким образом? Нет?

Или exporter надо настраивать собирать кумулятивно (как-то)?

"текущие" это в вашем понимании что?