Size: a a a

2020 December 03

A

Alexander in AWS_RU
Vasily Pantyukhin
Я как раз на прошлой неделе на эту тему читал вебинар по русски и даже в ех приглашал здесь :) Как устроен S3 и как его оптимизировать под нагрузки. Префиксы, партиции и пр. Если наберется хотя бы человек 20, могу опять для вам обо всем подробно с примерами рассказать. Напишите в личку, кому интересно
🤚🏼
источник

jj

jajaeee jjjjeeeee in AWS_RU
Vasily Pantyukhin
Я как раз на прошлой неделе на эту тему читал вебинар по русски и даже в ех приглашал здесь :) Как устроен S3 и как его оптимизировать под нагрузки. Префиксы, партиции и пр. Если наберется хотя бы человек 20, могу опять для вам обо всем подробно с примерами рассказать. Напишите в личку, кому интересно
а видео нельзя выложить, чтобы посмотреть запись?
источник

MT

Maksim Tretyak in AWS_RU
Vasily Pantyukhin
Я как раз на прошлой неделе на эту тему читал вебинар по русски и даже в ех приглашал здесь :) Как устроен S3 и как его оптимизировать под нагрузки. Префиксы, партиции и пр. Если наберется хотя бы человек 20, могу опять для вам обо всем подробно с примерами рассказать. Напишите в личку, кому интересно
Очень интересно! Вдруг, действительно, есть запись?
источник

AS

Alexey Stekov in AWS_RU
Вы не понимаете какой кайф, задавать вопросы в реалтайме!)
источник

U

Ugly in AWS_RU
Alexey Stekov
Вы не понимаете какой кайф, задавать вопросы в реалтайме!)
ещё бы не было ажиотажа :) а то часто просто отвечающие физически не могут ответить на все вопросы
источник

KT

Karen Tovmasyan in AWS_RU
Alexey Stekov
Вы не понимаете какой кайф, задавать вопросы в реалтайме!)
Ага, задал вопрос про встроенность консистентности и CRR и получил ответ: "не ну скорость света, вы чего" :(
источник

KT

Karen Tovmasyan in AWS_RU
Зашибись кайфанул!
источник

AT

Al T in AWS_RU
ну я же тебе все рассказал :) вот спрашивает там не пойми кого ))
источник

N

Nikolay in AWS_RU
Karen Tovmasyan
Ага, задал вопрос про встроенность консистентности и CRR и получил ответ: "не ну скорость света, вы чего" :(
А что такое CRR?
источник

KT

Karen Tovmasyan in AWS_RU
Nikolay
А что такое CRR?
Кросс рижион репликейшон!
источник

N

Nikolay in AWS_RU
Крос риджеон репликецшн
источник

KT

Karen Tovmasyan in AWS_RU
Al T
ну я же тебе все рассказал :) вот спрашивает там не пойми кого ))
Не ну вдруг!(
источник

N

Nikolay in AWS_RU
Спасибо.
источник

N

Nikolay in AWS_RU
Интересно было бы узнать как устроена репликация в s3. Это репликация с лидером или liderless. И если с лидером , то по какому протоколу идёт общение с репликами. Вчера вот промелькнуло сообщение ,что в s3 сделали strong consistency. Интересно узнать что докрутили. И вот используется ли консистентное хэширование или там range какой-нибудь
источник

VP

Vasily Pantyukhin in AWS_RU
Karen Tovmasyan
Ага, задал вопрос про встроенность консистентности и CRR и получил ответ: "не ну скорость света, вы чего" :(
хм…. а что в ответе было не так? Для консистентности, репликация должна быть синхронной и in-order. В CRR она асинхронная (потому, что скорость света) и ни времени (без RTC) ни последовательности копирования мы не гарантируем. Эого достаточно чтобы не продолжать дискуссии и смириться с eventual consistency
источник

KT

Karen Tovmasyan in AWS_RU
Vasily Pantyukhin
хм…. а что в ответе было не так? Для консистентности, репликация должна быть синхронной и in-order. В CRR она асинхронная (потому, что скорость света) и ни времени (без RTC) ни последовательности копирования мы не гарантируем. Эого достаточно чтобы не продолжать дискуссии и смириться с eventual consistency
Я надеялся, что вкупе с мульти-таргет и строгой консистентностью, добавят флажок "синхронная репликация"
источник

KT

Karen Tovmasyan in AWS_RU
Так что ответа "нет, на это не завезли" мне хватило бы с головой
источник

KT

Karen Tovmasyan in AWS_RU
А про ограничения физики я и так знаю
источник

VP

Vasily Pantyukhin in AWS_RU
Nikolay
Интересно было бы узнать как устроена репликация в s3. Это репликация с лидером или liderless. И если с лидером , то по какому протоколу идёт общение с репликами. Вчера вот промелькнуло сообщение ,что в s3 сделали strong consistency. Интересно узнать что докрутили. И вот используется ли консистентное хэширование или там range какой-нибудь
Для Control Plane используется свой проприетарный протокол, для копирования данных сам S3 и используется. Все остальные подробности не доступны…. ;)
источник

N

Nikolay in AWS_RU
А как сделали  strong consistency без атомных часов ?
источник