AS
влить метрики в прометей низя
Size: a a a
2020 July 30
SC
можно сделать экспортер WAL логов и заставить прометей его скрейпить
SC
звучит ужасно
GT
мне не то чтобы критично, просто у меня 140 GB WAL за 2 дня, бутнулся пром, и очень долго вставал, я принял решение убить вал в надежде что смогу восстановить, но если таки нет, то и хуй с ним
SC
wal в проме это для пуша в remote_write
GT
хмм.. если я подниму другой промтеус с этими валами, то могу ему указать слить данные в другой пром?
VT
влить метрики в прометей низя
есть интересный PR - promtool import, сейчас не дам линк...
но в общем можно вливать.
но в общем можно вливать.
SC
VT
влить метрики в прометей низя
изначально PR был такой - https://github.com/prometheus/prometheus/pull/5887
потом его перехватил Барт - https://github.com/prometheus/prometheus/pull/7586
оно даже работает.
потом его перехватил Барт - https://github.com/prometheus/prometheus/pull/7586
оно даже работает.
SC
хмм.. если я подниму другой промтеус с этими валами, то могу ему указать слить данные в другой пром?
у прометея нет remote_write эндпоинта, данные в него сейчас могут попадать только через scrape
VT
это Барт создал когда не увидел 5887
GT
пасибо, пойду ковырну
VT
мне не то чтобы критично, просто у меня 140 GB WAL за 2 дня, бутнулся пром, и очень долго вставал, я принял решение убить вал в надежде что смогу восстановить, но если таки нет, то и хуй с ним
много.
надо резать
надо резать
GT
много.
надо резать
надо резать
что именно и на что?)
VT
что именно и на что?)
140 за два дня
GT
а что же я могу порезать?
GT
ты имеешь ввиду на 2-3-4 прометеуса?
VT
ты имеешь ввиду на 2-3-4 прометеуса?
да. и заливать ненужное куда-то.
vm/thanos
ты ежесекундно снимаешь чтоли?)
просто чисто из интереса - что там?
vm/thanos
ты ежесекундно снимаешь чтоли?)
просто чисто из интереса - что там?
GT
да. и заливать ненужное куда-то.
vm/thanos
ты ежесекундно снимаешь чтоли?)
просто чисто из интереса - что там?
vm/thanos
ты ежесекундно снимаешь чтоли?)
просто чисто из интереса - что там?
там обычный k8s кластер с 1к подов
AS
А нет ли у вас там .tmp файлов?