потому разделяю 15 сек метрики и 1 сек по разным http путям, чтоб тянуть только нужное по 1 сек.

а какой в этом смысл ?

и какие таймеры пришлось выставить в остальных местах ?

помоему нет, про степ тоже читал. Я так понял это resolution, указываемый в квадратных скобках во время агрегаций. И он тоже был выставлен правильный - 2/3 s

нет это не он

тогда я не понял что такое step

step это параметр для запроса который показывает с какой переодичностью показать точки

вот этот

при дефолте в 1h точки будет каждые 14 секунд

http://demo.robustperception.io:9090/api/v1/query_range?query=up&start=1617222629.492&end=1617226229.492&step=14
вот пример

да, вроде оно и есть.

если период опроса будет 30 секунд пром придумает промежуточные точки

но в целом, вероятно вы зря хотите в одну секунду. слишком много других таймеров придется покрутить что бы извлечь из этого профит

в конфиге:  

scrape_interval: 1s
scrape_timeout: 1s

Да и всё. дальше уже в графане этот step найти.

да вроде норм работает на тесте для 10 метрик. Раньше был influx, через него уже пару лет как отображаем 1s метрики

ладно, спасибо. Решено)

Всем привет, может поможет кто советом..
Есть вот такой запрос
time() - sum(kube_pod_status_scheduled_time{owner="cluster",namespace="namespace"}) by (pod_name)
Он считает время работы каждого пода в указанном неймспейсе и все работает отлично

Но хотелось бы заджойнить в kube_pod_status_scheduled_time лейблы из другой метрики

получается что-то вроде:
time() - sum(kube_pod_status_scheduled_time{project="", owner="cluster", namespace="namespace"} + on (pod_name) group_left(some labels) docker_container_mem_rss{owner="cluster", namespace="namespace", project!=""}) by (some labels)

Лейблы добавляются, серии разбиваются как надо по имени пода, но значения показывают какую то дичь (до добавления "time() -" показывает ровно то что и первый запрос без "time() - ")

если что, рабочий вариант такой

time() - sum(kube_pod_status_scheduled_time{project="", owner="cluster", namespace="namespace"} + on (pod_name) group_left(some labels) ( 0 * docker_container_mem_rss{owner="cluster", namespace="namespace", project!=""})) by (some labels)

Привет всем! Есть такая проблема с алертменеджерами. 2 AM находятся в кластере, видят друг друга, обмен silence`ами проходит нормально. Однако если я отправлю алерт напрямую на один из AM - то в UI другого AM он не отображается. Это баг или фича?

Если я ничего не путаю, вроде надо в оба отправлять, но не уверен