AP
но у нас еще и разбивка по дням сделана, то есть бакеты вида data-2021-08-10, data-2021-08-11
Size: a a a
2021 August 11
AP
так их и мигрировать проще и TTL наворачивать и т.д.
П
А у него какая-то функция архивирования файлов есть?
AP
он вроде и так жмет при записи, реплики есть, бэкапы надо смотреть
AP
для данных которые не страшно потерять можно даже не заморачиваться
A
Хм, а почему? Сам не использовал, но в первом приближении выглядит проект интересно
t
Под низом всё равно фс, попробуй ls или find при более 4лямов файлов
PA
Да, маркетологи и дизайнеры неплохо так над сайтом поработали ;)
Тут ключевое слово - архитектура
Тут ключевое слово - архитектура
AP
у него нет
AP
мета вообще отдельно от файлов живет
AP
но конечно миллион файлов в один каталог лучше не закидывать в любом случае
SM
Неа. Метадата в бд.
PA
И да, создатели минио, судя по всему не знают что такое кластеризация и как она должна работать
SM
Собственно, я делал ls для 9млн. Минут за 5 отработал.
ВН
В смысле. Там мета в базе же
PA
Всё что имеет под капотом фс - полная шляпа для s3
ВН
А в ФС файлы размером 32 ГБ
t
У меня тупо жрало озу
A
Хм, можешь назвать хороший годный опенсорсный s3-совместимый вариант?
SM
Ты точно про сивид?
А где метадата хранилась?
А где метадата хранилась?