M
а как она у вас проявлялась ?
ну если по какойто причине основной пром не мог достучатся до ендпоинтов на инстансах, то появлялись пробелы , так как даных нет
Size: a a a
2020 August 11
AS
ну если по какойто причине основной пром не мог достучатся до ендпоинтов на инстансах, то появлялись пробелы , так как даных нет
а так что ? если у вас какой то инстанс отвалился и не скрейпится пару часов у вас потом метрики за пару часов в основной пром втягиваются ?
M
а так что ? если у вас какой то инстанс отвалился и не скрейпится пару часов у вас потом метрики за пару часов в основной пром втягиваются ?
ага
AS
ага
всё бы хорошо но это так не работает.
AS
fedarate не забирает метрики за весь период неодоступности
AS
он забирает только последние
M
всё бы хорошо но это так не работает.
ну локальных пром складывает себе в бд, когда приходит основной локальный отдает все что есть
AS
можно ссылку на документацию которая описывает это поведение ?
M
он забирает только последние
хм, надабы перечитать доку завтра, вроде как оно было не так
AS
хм, надабы перечитать доку завтра, вроде как оно было не так
оно так никогда не было. и такое поведение не предполагалось
AS
вы переизобрели колесо :(
AS
On any given Prometheus server, the /federate endpoint allows retrieving the current value for a selected set of time series in that server
M
оно так никогда не было. и такое поведение не предполагалось
Возможно, спасибо за направление, завтра перечитаю. Это как говорится пришло ко мне со сменой работы)
AS
AS
так что скорее избавляйтесь от локальных прометеев и будет вам свободно овермиллион памяти
M
вы переизобрели колесо :(
как по вашему тогда должна выглядеть архитектура, мониторинга простых вмок? Юзать чтото типа телеграфа? я правда не уверен что он сейфит даные при отсутствие конекта
AS
как по вашему тогда должна выглядеть архитектура, мониторинга простых вмок? Юзать чтото типа телеграфа? я правда не уверен что он сейфит даные при отсутствие конекта
центральный пром на прямую идет на каждый экспортер
AS
если коннекта нет -- вы потеряли данные
vk
ты же говорил там какой то promxy может эту проблему решить
AS
не хотите терять -- чините связность.
если починить связность нельзя вы можете собирать метрики с каждого локального прома и отправлять их по протоколу remote_write в какой то сторадж
если починить связность нельзя вы можете собирать метрики с каждого локального прома и отправлять их по протоколу remote_write в какой то сторадж