Size: a a a

Сбор и аналитика системных сообщений

2020 December 16

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Если бы я делал максимально просто, то сложил бы всё в кучку на одну тачку, и запустил рядом tailon.
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Это касательно хранения и интерфейса. А отправка куда-либо - через свой скрипт на omprog либо через omhttp.
источник

s

simplemice in Сбор и аналитика системных сообщений
хм, спасибо
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
🤷‍♂️ так не за что же :-)
Ну или если что-то со смузи хочешь - loki опять же, здесь локиводы тоже есть, спроси у них.
источник

IK

Isayakiy Kotletov in Сбор и аналитика системных сообщений
все прив, вопрос от файлбит нубов, пытаюсь использовать его как логстэш - кидать json в tcp сокет и прокидывать в эластик дальше
но контент json подставляется весь в message
как это исправить и можно ли?
источник

MG

Max Grom in Сбор и аналитика системных сообщений
Привет. Подскажите, собираете ли вы продуктовые метрики по использованию ваших систем по части бизнес-логики? Есть, например, пуш метрик в statsd по udp, со сбором в Prometheus. Используете ли вы такой подход, или может другие? С какими вопросами сталкивались? Спасибо!
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Isayakiy Kotletov
все прив, вопрос от файлбит нубов, пытаюсь использовать его как логстэш - кидать json в tcp сокет и прокидывать в эластик дальше
но контент json подставляется весь в message
как это исправить и можно ли?
Например, не использовать файлбит :-)
источник

IK

Isayakiy Kotletov in Сбор и аналитика системных сообщений
Sergey Pechenkó
Например, не использовать файлбит :-)
ну если не получится настроить
есть еще какие-то доводы?
источник

IK

Isayakiy Kotletov in Сбор и аналитика системных сообщений
я как бы обычно с logstash/rsyslog, даж не знал что файлбит порт может выставлять, поэтому изучаю
тут просто уже он есть и чтобы переезжать нужны веские аргументы)
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Isayakiy Kotletov
ну если не получится настроить
есть еще какие-то доводы?
Доводов никаких, кроме работающего продукта (посмотри наши общие чаты ;-)), который уже два года логи собирает централизованно и до кучи засылает безопасникам спокойно с помощью rsyslog, плюс алерты на нём же сделаны из потока.
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Со временем появились алерты бизнесовые, то есть у сейлзов есть свой канал в телеге, куда продукт сообщает, например, о некорректных с точки зрения бизнеса настройках.
источник

IK

Isayakiy Kotletov in Сбор и аналитика системных сообщений
ясно
кстати вроде нашел процессоры в файлбите, там вроде даже есть то что нужно, чекну и если что на rsyslog
источник

GG

George Gaál in Сбор и аналитика системных сообщений
Isayakiy Kotletov
ясно
кстати вроде нашел процессоры в файлбите, там вроде даже есть то что нужно, чекну и если что на rsyslog
привет
источник

SP

Sergey Pechenkó in Сбор и аналитика системных сообщений
Max Grom
Привет. Подскажите, собираете ли вы продуктовые метрики по использованию ваших систем по части бизнес-логики? Есть, например, пуш метрик в statsd по udp, со сбором в Prometheus. Используете ли вы такой подход, или может другие? С какими вопросами сталкивались? Спасибо!
Собираем, только без statsd. Вообще делать метрики из событий - очень сильно такое себе: почти любые агрегаты будут показывать дичь именно из-за нерегулярной природы исходных данных.
источник

YB

Yury Bushmelev in Сбор и аналитика системных сообщений
Max Grom
Привет. Подскажите, собираете ли вы продуктовые метрики по использованию ваших систем по части бизнес-логики? Есть, например, пуш метрик в statsd по udp, со сбором в Prometheus. Используете ли вы такой подход, или может другие? С какими вопросами сталкивались? Спасибо!
вопрос для церкви метрик?
источник

MG

Max Grom in Сбор и аналитика системных сообщений
А как собираете? Знаю как минимум будущую проблему что делать адекватный срез по пользователям в Prometheus не получится из-за сильно уникальных значений user_id
источник

MG

Max Grom in Сбор и аналитика системных сообщений
Yury Bushmelev
вопрос для церкви метрик?
Не оперирую понятием “церковь метрик”, но могу предположить что да
источник

YB

Yury Bushmelev in Сбор и аналитика системных сообщений
это чатик такой специальный про метрики
источник

MG

Max Grom in Сбор и аналитика системных сообщений
Не слышал о таком
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
источник