RK
“С объемом от 1 до 500 000 000” - это сколько читается при обработке или сколько запрос возвращает?
Size: a a a
2019 October 31
vk
“С объемом от 1 до 500 000 000” - это сколько читается при обработке или сколько запрос возвращает?
Это столько читается при обработке
vk
100 000 RPM - вы сейчас читаете из КХ с таким рейтом?
У нас сейчас 20к
vk
не обязательно иметь один persistent disk - лучше диск на каждый шард. Шардирование в данном случае как раз и обеспечит горизонтальное скалирование. Независимо можно отскейлить и vm-select сервисы, что тоже улучшит скорость чтения данных
Что делать если ВМ которая прикручена к шарду отвалится, повиснет сервер и т.п., до момента пока она не оживет я буду терять данные и 500тить клиентам?
RK
vladimir kolobaev
Что делать если ВМ которая прикручена к шарду отвалится, повиснет сервер и т.п., до момента пока она не оживет я буду терять данные и 500тить клиентам?
ответы будут помечены как частичные. Данные на вставку терятся не будут - они будут перенаправлены на живые шарды
vk
ответы будут помечены как частичные. Данные на вставку терятся не будут - они будут перенаправлены на живые шарды
Частичные? Только 50% триггеров начнут орать 50% пользователей?
AN
есть будете использовать ceph дайте знать как полет
RK
vladimir kolobaev
Частичные? Только 50% триггеров начнут орать 50% пользователей?
вы наверное хотели спросить, как сделать ha без репликации, верно?
vk
Ребята из биллинга будут очень не довольны частичным данным
AN
можно дублецировать данные и писать сразу в две VM - выбирать из них promxy - на данный момент это самый частый используемый вариант для HA
vk
вы наверное хотели спросить, как сделать ha без репликации, верно?
Я хотел спросить как мне с помощью вашей системы, обеспечить надёжное предоставление данных нашим сотрудникам
vk
можно дублецировать данные и писать сразу в две VM - выбирать из них promxy - на данный момент это самый частый используемый вариант для HA
У нас кластер КХ решает эту проблему без параллельной записи одного и того же.
AN
кластер КХ требует зукипер
AN
если КХ решает вашу проблему то пользуйтесь им - каждому инструменту свое применение
vk
кластер КХ требует зукипер
Так и это ок, какой зукипер мне прикрутить к ВМ чтобы она предоставила мне такую же надёжность?
ЕО
vladimir kolobaev
Я хотел спросить как мне с помощью вашей системы, обеспечить надёжное предоставление данных нашим сотрудникам
Зачем нужна НАДЁЖНОСТЬ для метрик?
vk
И это при том что у меня SSD винты в 6 рейде
AN
с точки зрения разработчика это сложный вопрос что сделать - прикрутить координатор в виде зукипера или делать hash-ring пока ответа не будет на этот вопрос не будет и репликации
AN
оба решения имеют сильные недостатки
N
vladimir kolobaev
Так и это ок, какой зукипер мне прикрутить к ВМ чтобы она предоставила мне такую же надёжность?
Какое то агрессивное нападение:))