VS
там вроде чувак из свисскома недавно фабиану патчи засылал чтобы c-relay в этой ситуации данные не терял
Size: a a a
2019 November 04
A
а почему именно lz4?
VS
а почему именно lz4?
ну еще гзип
A
щас же zstd модный
VS
щас же zstd модный
у фабиана нет поддержки zstd. Почему? К фабиану вопрос
W
ELK? да лан, у кликхауса гораздо выше имхо
если просто метрики хранить, а не собственный DWH с нуля писать, то порог вхождения в CH как раз невысокий
лично у меня кастомный стек мониторинга, использующий СН, с помощью завсегдатаев этого лампового чатика взлетел, а вот Graylog - нет... а ELK, если с ним не работал раньше - ещё сложнее
лично у меня кастомный стек мониторинга, использующий СН, с помощью завсегдатаев этого лампового чатика взлетел, а вот Graylog - нет... а ELK, если с ним не работал раньше - ещё сложнее
ST
ELK? да лан, у кликхауса гораздо выше имхо
+
AV
Telebotik
В принципе есть возможность налить в две базы одновременно, это примерно 1,2млн метрик в сутки.
Еще в третью базу следует попробовать - victoriametrics . Сжатие будет получше, чем у timescale :)
T
Еще в третью базу следует попробовать - victoriametrics . Сжатие будет получше, чем у timescale :)
Да, почему нет.
Вообще у меня достаточно простая задача.
Заливать метрики аккаунтинга пользователей плюс может быть есть можно то не помешает доп.инфа как имя интерфейса но это не обязательно, в идеале уплотнять старые данные не хочется.
Вообще у меня достаточно простая задача.
Заливать метрики аккаунтинга пользователей плюс может быть есть можно то не помешает доп.инфа как имя интерфейса но это не обязательно, в идеале уплотнять старые данные не хочется.
T
Коллеги пробовали юзать мускул не знаю на что надеялись :)
T
Потом я пробовал инфлюкс, но как уже известно это тоже был так себе вариант.
T
Timescale вроде нравится мне по историческим причинам, но здесь противодействие коллег плюс раньше когда не было у них сжатия то были подозрения что растолстеет)
T
Присматриваюсь некоторое время к твоему проекту, но все до дело не доходило но вот пора бы определяться красивый или умный😁
k
Telebotik
Аккаунт сетевых инрфейсов, счётчики пользователей.
ну если пара-тройка байтов в подсчёте трафика пропадёт - пофиг, наверное. а вот пользователи - нет.
имхо, для первого можно таки графит попробовать, бо проверен и прост (ну, не с первого взгляда, да), а вот для пользователей выше вроде написали уже
имхо, для первого можно таки графит попробовать, бо проверен и прост (ну, не с первого взгляда, да), а вот для пользователей выше вроде написали уже
AV
Telebotik
Да, почему нет.
Вообще у меня достаточно простая задача.
Заливать метрики аккаунтинга пользователей плюс может быть есть можно то не помешает доп.инфа как имя интерфейса но это не обязательно, в идеале уплотнять старые данные не хочется.
Вообще у меня достаточно простая задача.
Заливать метрики аккаунтинга пользователей плюс может быть есть можно то не помешает доп.инфа как имя интерфейса но это не обязательно, в идеале уплотнять старые данные не хочется.
ВМ как раз заточена под компактное хранение и быструю обработку сырых данных - см. https://github.com/VictoriaMetrics/VictoriaMetrics/blob/master/README.md#downsampling
T
ну если пара-тройка байтов в подсчёте трафика пропадёт - пофиг, наверное. а вот пользователи - нет.
имхо, для первого можно таки графит попробовать, бо проверен и прост (ну, не с первого взгляда, да), а вот для пользователей выше вроде написали уже
имхо, для первого можно таки графит попробовать, бо проверен и прост (ну, не с первого взгляда, да), а вот для пользователей выше вроде написали уже
Согласен, пофиг если и за час пропадет.
Но раз с чистого листа делаю, то думаю если взлетит то весь мониторинг также перенести с инфлюкса на общее решение )
Но раз с чистого листа делаю, то думаю если взлетит то весь мониторинг также перенести с инфлюкса на общее решение )
AN
кубернетес планируется?
T
ВМ как раз заточена под компактное хранение и быструю обработку сырых данных - см. https://github.com/VictoriaMetrics/VictoriaMetrics/blob/master/README.md#downsampling
Кажется то что нужно, спасибо.
T
кубернетес планируется?
Пока только в планах)
AN
это сложный путь особенно в продакшене перепозти на него