Отдавать метрику чаще, чем раз в 10 минут

она каждые 30 секунд скрейпится. Увеличивается каждые 10 минут.

То есть increase(metric_count{test="test"}[1m]) > 0 срабатывает, не когда метрика появилась. А через 10 минут, когда она увеличилась. А я хочу, еще детектить ее появление.
Может если ряд опишу будет понятно: нет метрики, нет метрики, ..., 1 (вот здесь хочу чтобы тригер срабатывал),1,1,1,...спустя 10 минут 2 (тригер срабатывает),2,2,2...3 (тригер срабатывает),3,3,3,3...

Вы хотите решить каунтеромм то, что решает шкала. имхо

да, absent подходит. Для конкретно этой проблемы, но у меня не совсем это.

Задача чисто косметическая, поэтому постеснялся ее описывать, но да ладно.

Хочу в аннотациях в графане видеть инфу о деплоях и в тегах видеть версии.
Для этого, у меня в pushgateway отправляется инфа о них. И получаются метрики (счетчики) такого вида:
deploy{project="example",app="example",version="v1.0.1"} 1
deploy{project="example",app="example",version="v1.0.2"} 1
deploy{project="example",app="example",version="v1.0.3"} 1
...

И вот тут две проблемы. Первая - что я описал выше - не видно первого деплоя. И вторая - моя хотелка видеть там версии.

Из-за второй хотелки, я сделал такую дичь в аннотациях графаны: time() == bool timestamp(  increase(deploy{project="example", app="example"}[90s]) * on(project,app) group_left() (increase(deploy:sum{}[90s]) > 0)  )

Где: dpeloy:sum это правило: sum(deploy{service="pushgateway"}) by (project,app)

В целом это работает: http://dl3.joxi.net/drive/2020/05/06/0030/2608/1985072/72/530d0ac9de.jpg

Но работает неверно, так как этот запрос возвращает несколько метрик, соотвесвтенно в теги анноиации могут попасть лейблы от не той метрики.

Если убрать лейбл "version" и просто накапливать счетчик. Это работает корректно, за исключением того, что первый деплой не покажет. Ну и версию в теги конечно никак не добавить.

Я скорее всего хочу странного, и делаю это странно, и мне не надо этого хотеть, или делать совсем не так.

Подскажите ещё пожалуйста, никак не пойму как добавить плагины.

Вот я скачал prometheus_client.go и положил его в C:\Program Files\telegraf\plugins. В файле конфига в outputs добавил [[outputs.prometheus_client]]
 ## Address to listen on.
 listen = ":9273"
 
 ## Path to publish the metrics on.
 path = "/metrics"  

Службу wmi exporter остановил. Кажется ничего не работает.

Я правильно положил плагины? Где listen, там должен быть адрес prometheus и свободный открытый порт?

я ничего никуда не скачивал. просто агента телеграфа поставил и зарегистрировал его как сервис

после этого http://localhost:9273/metric начнёт отдавать дефолтный набор метрик, которые настроены в конфиге телеграфа

ну или через netstat можно посмотреть прослушивается ли порт 9273 и если да, то кем

А там же формат для influxdb, а чтобы работало с прометеем, нужно плагин, разве нет?

он в комплекте с дистрибутивом уже идёт. или ты на месте из сорсов собирал? :)

Не, я через .exe сервис зарегистрировал. Просто выше были ссылки на git, а там плагины отдельно лежат, я и подумал что их качать и включать тоже нужно отдельно

Спасибо, попробую снести и зарегистрировать заново

слушайте, я правильно понимаю
что если у метрики в prometheus изменится HELP
то это новая time series?

А подскажите, какую пользу вы получаете из этого графика? Когда какой релиз был задеплоен?

частота релизов/ kpi

Меня можно на ты =)

Чисто эстетика, удобно и красиво смотрится. На всех графиках визуально видно когда деплои и из какой версии.

мы это решили тем что сделали отдельный деплой лог

в него попадают события из gitlab-ci

это несколько более удобно.