Ты не можешь попасть на все инстансы функций чтобы метрики собрать, так что лучше куда-то их пушить (либо пользоваться внешним общим стораджем)

Не могу, верно.
Сейчас используем пуш гэйтвэй для прома, но он не очень репрезентативн - хранит в себе значения между запусками функций -> прометеус забирает одни и те же значения со своим интервалом.
Ещё есть идея хранить в логах, но есть несколько но(цена, скорость).

Собственно итересно, есть ли ещё какие-нибудь решения

statsd какой-нибудь поднять

ща будут кидаться помидорами, но пуляйте в инфлуксдб метрики

statsd-exporter же

Либо клиент прома прям в апп вкорячить

В случае с облачными faas(AWS lambda, gcp cloud function) statsd нельзя же использовать?

Опять же - лямбда, состояние между запусками не хранится. Клиент прома представляет эндпоинт, по которому можно забрать метрики.

Инфлуксдб так непопулярен?
Вообще, использование tsdb норм идея, спасибо.

флукс переусложненный QL + хранилка инфлукса самая медленная и прожорливая из своего класса

почему нельзя?

881Y1

Похоже что можно, посмотрю, спасибо:)

Я регулярно использую, а что там не так?

Всем привет. Кто нибудь исследовал вопрос создания запроса к прометеусу, что загрузит весь cpu?
Может есть какие то рекурсивные запросы, что съедают весь cpu?

Елена Игнатьева: user has been CAS banned

Попробуйте выполнить запрос quantile_over_time({__name__!=''}[1y])

Спасибо большое вам)) Хотел было спросить, но решил для начала поиском пройтись по группе, повезло.

Всем привет. Есть вопрос по метрикам прометея:
1. Есть метрика вида
points_count{provider="lkservice_21015"} 179
2. Есть вторая метрика
is_active(project="lkservice") 0
Таких метрик несколько, т.е. для каждого provider есть 2ая метрика is_acitve с похожим лейблом project(кроме цифр)
Я никак не могу сообразить как сделать алерт, если points_count == 0 и is_active == 0 для каждого provider
В какую сторону можно покопать?

Не помогло, получилось просто запросами за год скушать всю оперативку и весь процессер
Но на более мощьной машине не получается.
Если есть идей то пишите.