я шикарный

нет, не эта идея, а по разбери ;D

лучше

я рассказывал как работает шардирование баз данных сейчас, девушке, еле сам вспомнил в общих словах

последний раз лет 7 назад это делал

мне тоже расскажи)

ну сразу описка я не претендую на точность, хорошо если меня поправят. Я очень давно не занимался базами


- у тебя есть база на 10 лямов строк. Это файл на диске
- у тебя есть индекс на 10 лямов. Это файл на диске, в идеале в ОЗУ
- ты делаешь селект по ключу индекса, база перебирает индексы, находит нужный, в нем адрес физический строки на диске, находит в файле строку.  Но по 10 лямов это не быстро.

- шардинг - когда у тебя по математической функции индексы и база бьются на много маленьких баз и индексов.

- он по мат функции  от индекса сначала  находит где искать индекс, затем уже в маленьком списке индексов быстро находит индекс и в нем адрес строки записи на диске

ну и при записи раскидывает все по этой же функции, само собой

потрясающе

почему я вспомнил, на прошлой работе писал паука для внутренних нужд, там каждая стркоа результат парсинга страницы сайта, коих были миллионы. В итоге паук разросся до кэша в виде редиса, mongo для промежуточного кэша страниц. и mysql для реляционных связей - типа категория, страница и тдд

у яндекса есть крутой курс по базам, общая теория. Там бородатый дядька начинает с того что он типа местный гуру, который следит за тем чтобы все было хорошо и начинает с теории про файлы , адреса и тд)

мне бы у @alex_kulagin по ноде бы допройти вначале 😿

в интернете не могу этот курс найти

не помню откуда он у меня был

*_*

очень круто выглядит