Берешь и строишь. В чем вопрос?

нужно выбрать datasource prometheus в графане и указать адрес прометеуса
создать новый dashboard в нем панель и указать тот же запрос что и на графикее

Как сделать, чтобы на одном графике было несколько интерфейсов от роутера?

Указать запрос который вернёт больше чем 1 таймсерию

А если говорит более детальное убрать лейбл которые отвечает за интерфейс из запроса (если это лейбл )

Если это разные метрики то графана позволяет визуализировать несколько запросов на одном графике

Есть в prometheus _err_total{id="xxx"} - какое-то положилтельное целое, и _up{id="xxx",upstream="yyy"} - 0|1. Хочу сделать в grafana Status History вот по этим id. Не понимаю как записать "девайс офлайн"

вот ты смеешься, а я недавно на заправке стою в будке заправки, жду пока зальёца бак и одна продавщица другой "галяяяяя где журнал сосисок"

они ведут журнал сосисок, которые продают в виде хотдогов!

такой вопрос за пром/викторию и однотипные алерты для разных хостов.
у разных сервисов могут быть разные объёмы ресурсов и разная их утилизация. например, оракл любит алоцировать всю память и ему в целом всё равно, что это 95% RAM. другие сервисы, напротив, могут резко съедать всё во время нагрузки и помирать. в основном алерты делают что-то типа > 90% ram usage для всех инстансов и некоторые алертят почём зря. что вы делаете с этой ситуацией? мне приходило в голову писать исключения для некоторых хостов из общих правил и отдельные для них правила. это работает но появляется неприятный фактор: забыли добавить или удалить из исключений. и сразу напрашивается что-то типа групп

возможно, стоит мониторить различные rate? если у кого-то есть интересные решения и наработки для node_exporter - поделитесь

налепи разным хостам лейблы групповые и по ним делай алерты

это вопрос к схеме лейблов, принятой в компании.
Мы у себя приняли, например, для хостов instance → service → application → environment, для приложений instance → component → service → application → environment. Всё довольно прозрачно, можно легко выбрать требуемые данные и нарисовать правило алерта, не городя регэксп в два экрана

но суть всё равно верная? много одинаковых алертов с разными порогами для групп?

grafana/grafana tagged: v8.2.2
Link: https://github.com/grafana/grafana/releases/tag/v8.2.2
Release notes:

release v8.2.2

а конкретно можете пример привести, как вы навешиваете лэйбл для хостов с огромным дисковым пространством? т.е. когда порог свободного места для 10 Гб и 1 Тб должен быть разным, 10% и 2%. в конечном то итоге при рендеринге targets это та же регулярка или ещё хуже, конкретный список

Вот так делаю

А, ну совсем без конкретных списков не обойтись. Одно красивое правило на весь прод, мне кажется, малореально сделать.
Но скажем так, вот на примере той же вики алертинг я делаю так:
{environment="prod", application="victoriametrics", service="vmstorage"}, для {service="vmselect} правило другое. Вопрос в том, насколько гибко ваша схема лейблов даёт вам работать. Иногда лучше чуть больше лейблов, зато никаких регулярок. Другой разговор, если у вас, к примеру, пачка постгресов, из них 10 штук по 2 тера, остальные по 100 гигов, тут только пытаться их делить по смыслу, ну либо регулярки