Size: a a a

2020 October 15

IV

Igor V in ctodailychat
Vladimir Deev
ну, там видимо проблемы начинаются, когда нужно несколько нод делать) в клауд-провайдерах это в пару кликов делается)
мы у себя в es держим только логи за определенный период, а потом скидываем на S3. Далее athena если нужна аналитика
источник

VD

Vladimir Deev in ctodailychat
ну меня бы устроило хранить логи за последнюю неделю
источник

VD

Vladimir Deev in ctodailychat
но у papertrail какие-то грустные лимиты по ingest'у
источник

IV

Igor V in ctodailychat
Vladimir Deev
смотрел, у них ведь свое проприетарное что-то? а не elk в облаке
c papertrail безумно просто начать.
источник

GL

Gleb Lesnikov in ctodailychat
мы съехали с говноэластика и ОЧЕНЬ рады этому
источник

VD

Vladimir Deev in ctodailychat
Gleb Lesnikov
мы съехали с говноэластика и ОЧЕНЬ рады этому
Куда?
источник

GL

Gleb Lesnikov in ctodailychat
в проприетарную БД для логов
источник

GL

Gleb Lesnikov in ctodailychat
че-то типа Splunk, BigQuery, Clickhouse, Druid, Snowflake вместе взятое
источник

GL

Gleb Lesnikov in ctodailychat
и гораздо круче чем всё вышеперечисленное по-отдельности
источник

IV

Igor V in ctodailychat
как она называется?
источник

IV

Igor V in ctodailychat
я слышал только про одну систему разработчики которой утверждали что они сразу relational, column oriented, key-value, document oriented, streaming, time series только лучше. Это MarkLogic 😄
источник

GL

Gleb Lesnikov in ctodailychat
Igor V
как она называется?
Azure Data Explorer (Kusto)
источник

AP

Alexander Panko in ctodailychat
Igor V
я слышал только про одну систему разработчики которой утверждали что они сразу relational, column oriented, key-value, document oriented, streaming, time series только лучше. Это MarkLogic 😄
timeseries не обещают и вообще пожиже, но тоже) https://www.arangodb.com
источник

GL

Gleb Lesnikov in ctodailychat
Igor V
я слышал только про одну систему разработчики которой утверждали что они сразу relational, column oriented, key-value, document oriented, streaming, time series только лучше. Это MarkLogic 😄
ну не, не документ
источник

GL

Gleb Lesnikov in ctodailychat
и не KV
источник

IV

Igor V in ctodailychat
columnar отсутствует! следующий!
источник

A

Alex in ctodailychat
Vladimir Deev
Всем привет.

У нас SaaS, 4 сервера, 29 контненейров, все дела. Хотим наконец-то централизованно собирать логи (пока не знаю как много будет логов, по минимум если логировать, то пару Гб в день, наверное, выйдет).

Девопса в команде нет и не предвидится. Бюджет ограничен.

Смотрим в сторону ELK. Лучше в облаке или самим хостить? Девопса у нас штатного нет и пока не предвится, просто хочется побыстрее начать собирать логи. Начитался историй о проблемах с его масштабированием, если самим хостить, поэтому смотрю в сторону облачных хостеров.
кликхаус? для него есть логгеры опенсорсные
источник

A

Alex in ctodailychat
а, вам готовое в облаке, сорри
источник

AP

Alexander Panko in ctodailychat
Igor V
ну и обратите внимание на redpanda
curl … | sudo bash ну слов нет
источник

VD

Vladimir Deev in ctodailychat
Alex
а, вам готовое в облаке, сорри
Да бы)
источник