Size: a a a

Сбор и аналитика системных сообщений

2020 November 14

MK

Max Krylov in Сбор и аналитика системных сообщений
Aleksey Shirokikh
а какое поведение должно было быть ?
Такое впечатление, что на диск пишет с сильной компрессией и читать старые с сопоставимой скоростью просто не может, он даже в ио диска не упирался, насколько я помню. Т.е. дело было не в ресурсах хоста
источник

A

Alexander in Сбор и аналитика системных сообщений
Max Krylov
Самое дикое для меня оказалось в том, что при исчерпании лимита на объем хранения сообщений в раме, если их не вычитывают, кролик начинает писать на диск (это виртуалка в облаке селектел и диск средний, не медленный), и даже если потом появляется потреьитель и пытается читать - кролик пытается одновременно читать старые с диска, писать туда текущие т.к лимит и читать гораздо медленнее чем пишет. Я специально дебажил, когда столкнулся с этим в очередной раз. В итоге, если пошла запись на диск, можно дропать, вычитать уже нереально. А новые пишутся, потому что их не вычитать, есть же старые.
Даже в случае, если очередь не persistent? Я давно рэббит не трогал, но мне кажется, что это поведение настраивается.
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Alexander
Даже в случае, если очередь не persistent? Я давно рэббит не трогал, но мне кажется, что это поведение настраивается.
Да. И как выяснилось - персистант очередь это именно труба персистент. Что бы данные были персистент, им тоже нужна отдельная пометка)
источник

A

Alexander in Сбор и аналитика системных сообщений
Max Krylov
Да. И как выяснилось - персистант очередь это именно труба персистент. Что бы данные были персистент, им тоже нужна отдельная пометка)
Это да
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
У кролика много ручек и я верю, что если их правильно все накрутить, он таки будет адекватно работать. Но после кафки это выглядит очень стремно.
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
ладно кафка и правда хороша, а кролик и правда так себе.
источник

GG

George Gaál in Сбор и аналитика системных сообщений
Max Krylov
У кролика много ручек и я верю, что если их правильно все накрутить, он таки будет адекватно работать. Но после кафки это выглядит очень стремно.
+
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
жырная ток
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Хех, и после этого проекта я таки получил опыт в ощущениях, блин.
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
подождем jepsen для redpanda и посмотрим чо там у него
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Aleksey Shirokikh
подождем jepsen для redpanda и посмотрим чо там у него
Какие интересные новые тайтлы, погуглить что ли?)
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
откуда новый то...
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Ну для меня
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
панду вон выше упоминали
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Сижу на острове, чо там в мире - хз
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
а джепсен этот тот безумный чувак который постоянно говорит что ваша база данных дерьмо
источник

MK

Max Krylov in Сбор и аналитика системных сообщений
Так я её выше первый раз увидел
источник

GG

George Gaál in Сбор и аналитика системных сообщений
Aleksey Shirokikh
а джепсен этот тот безумный чувак который постоянно говорит что ваша база данных дерьмо
++
источник

GG

George Gaál in Сбор и аналитика системных сообщений
Он не безумный
источник

AS

Aleksey Shirokikh in Сбор и аналитика системных сообщений
тот чувак конечно афир, но это не меняет дело
источник