Если оно у тебя в external labels то оно само добавится

Нашёл как это сделать, если кому-то интересно, то поделюсь

Спасибо за ответы, точнее я хочу добавить здесь вместо $labels.instance лейбл который бы показывал окружение в котором этот инстанс находится

Где показывал-то? В твоём редакторе?

Или в remote-write добавлял?

Или в алертменеджере чтобы появлялось?

"я хочу чтобы ко всем алертам из моего прометея добавлялся указанный мной лейбл"?

В алертменеджере

"я хочу чтобы к алерту добавился лейбл env, который есть в моей метрике stuff внутри строки вида my env is <env>"?

Большое спасибо, кажется это то что нужно, буду разбираться

Внутри шаблона лейбла можно дёргать го-шаблоны

Хорошо, спасибо проверю

никто не просил, но я отвечу:

local kp = (import 'kube-prometheus/main.libsonnet') + {
  values+:: {
    ....
    local mixinConfig = {
      mixin: {
        _config: {
          showMultiCluster: true,
        },
      },
    },
    nodeExporter+: mixinConfig,
    kubernetesControlPlane+: mixinConfig,
  },
};

#BMM06 #Москва #метроАлексеевская, #технопаркКалибр,  #бесплатно, 20 октября, 10:00

Big Monitoring Meetup 06 - конференция мониторингового сообщества Monhouse.tech, объединяющая лидеров в сфере мониторинга.

Дорогие друзья, напоминаем, до мероприятия остался один день. Регистрация на мероприятие завершается завтра.

Просим поторопиться: https://eventuer.timepad.ru/event/1772348/

Спикеры:
• Константин Михайлов, Saymon
• Вячеслав Милованов, Paessler
• Николай Храмчихин,  VictoriaMetrics
• Евгений Кривоносов, SDI Soft
• Голубев Майк, AWS
• Сергей Спорышев, ITSUMMA
• Ольга Чаталян, Tinkoff

А кто-нибудь использует influxDB, для мониторинга инфраструктуры (серваки, вирптуалки) тут? Я сейчас думаю на чём мониторинг реализовать, кроме Zabbix, Мне очень нравится эта система, но пугают разговоры о том, что очень плохо она справляется с высокой нагрузкой  - ловит OOM в частности.

хронограф

смотрите tick-стек в целом

Если это вопрос, то "да".  Telegraf + InfluxDB + Chronograf + Kapacitor. Я рассматривал prometeus - но, во-первых как я понял там проблеммы с отказоустойчивостью, и архитектура под грибами писалась IMHO. Язык запросов PromQL - тоже какой-то а-ля zabbix trigger.

не то чтобы я пользовался tick, но судя по тем отзывам, что я видел, проблемы с отказоустойчивостью не у прома

Да, получалось отвратно, в итоге перешел на Пром и все стало хорошо