Size: a a a

Церковь метрик

2021 January 27

LD

Lex Dolgov in Церковь метрик
Все привет. А есть у кого опыт больших инсталляций victoriametrics в синглмод?

Пытаюсь перелезть на нее с Прометея, столкнулся с проблемами на больших выборках.
На вход около 2млн метрик. И при этом пытаюсь достать через rules около 700к упираюсь в тайм-аут в 3минуты.
Прометей такое прожевывает, но при этом сильно больше хочет рамы и места )) именно поэтому и хочу с него слезть
источник

AP

Alexey Polyakov in Церковь метрик
Господа, кто-то пробовал большие csv в vm пихать, больше чем 262144 байт на которые апи ругается и которые не настраиваются нигде? Пока не вижу иного выхода как бить файлы на мелкие, но это жесть будет, т.к. данных просто море
источник

A

Anton in Церковь метрик
гайз, есть идеи, как можно результат крупного скрипта на питоне исполняемого на линуксе в метрику сформировать и алертить? писать лог в файл и из него брать гроком?
источник

A

Anton in Церковь метрик
коллеги предлагают использовать елк, из него алерт вебхуком генерить, но я так себе отношусь к елк в алертинге
источник

AS

Aleksey Shirokikh in Церковь метрик
Anton
гайз, есть идеи, как можно результат крупного скрипта на питоне исполняемого на линуксе в метрику сформировать и алертить? писать лог в файл и из него брать гроком?
pushgateway или text_file_collector у node_exporter
источник

AY

Andrey Yurevich in Церковь метрик
Добрый день коллеги. Подскажите какую-нибудь небольшую тулу для хэлсчеков и алертинга по емейлу. Суть в том что бы передать ей http адрес, и когда будет 5хх -- получать емейл. Не охота прометея ставить для такой задачи
источник

AD

Alex D in Церковь метрик
а сторонние uptimerobot или pingdom не подходят?
источник

iS

ichac Shikalov in Церковь метрик
можно и на питоне написать, на коленке
источник

AS

Aleksey Shirokikh in Церковь метрик
ichac Shikalov
можно и на питоне написать, на коленке
хостить придется. внешний сервис вполне норм
источник

AY

Andrey Yurevich in Церковь метрик
Alex D
а сторонние uptimerobot или pingdom не подходят?
не знаю. Первый раз слышу
источник

AS

Aleksey Shirokikh in Церковь метрик
Andrey Yurevich
не знаю. Первый раз слышу
таких сервисов довольно много. есть условно бесплатные
источник

iS

ichac Shikalov in Церковь метрик
конечно. если можешь спалить контору. не всем нравится
источник

AS

Aleksey Shirokikh in Церковь метрик
ichac Shikalov
конечно. если можешь спалить контору. не всем нравится
не понимаю о чём вы.
источник

iS

ichac Shikalov in Церковь метрик
безопасники не всегда любят отдавать урлы с апи наружу
источник

AS

Aleksey Shirokikh in Церковь метрик
вы о какой то своей боли. в вопросе ничего такого нет
источник

iS

ichac Shikalov in Церковь метрик
ну да
источник

A

Andor in Церковь метрик
если это урл публичного апи, то он уже снаружи
источник

AP

Alexey Polyakov in Церковь метрик
Alexey Polyakov
Господа, кто-то пробовал большие csv в vm пихать, больше чем 262144 байт на которые апи ругается и которые не настраиваются нигде? Пока не вижу иного выхода как бить файлы на мелкие, но это жесть будет, т.к. данных просто море
ответ простой, надо отправлять пейлоад в бинарном виде (--data-binary в курле), в текстовом перенос строки игнорируется..
источник

AV

Aliaksandr Valialkin in Церковь метрик
Вадим
коллеги ну поделитесь большой тайной - что используете на клиенте (имеется в виду сервисах): гистограммы или саммариз?
у меня например разброс размеров ответов и латенси очень большой и заранее описать это бакетами определенных размеров не могу - попаду пальцем в небо
саммариз вроде сами все считают и уже в готовом виде - но сколько за это придется заплатить производительностью сервиса?
источник

D

Dave in Церковь метрик
Andrey Yurevich
Добрый день коллеги. Подскажите какую-нибудь небольшую тулу для хэлсчеков и алертинга по емейлу. Суть в том что бы передать ей http адрес, и когда будет 5хх -- получать емейл. Не охота прометея ставить для такой задачи
statping
источник