Size: a a a

SDS и Кластерные FS

2021 May 28

ВН

Виталий На Заборе... in SDS и Кластерные FS
тоже хорошо
источник

t

tsla in SDS и Кластерные FS
ну честно написали фикс блоки по 4мб , зато ты не олратил внимание про чанки по 64 метра
источник

UD

Uncel Duk in SDS и Кластерные FS
Чего чанкать если размер файла меньше?
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
я ж говорю, либо ceph либо seaweedfs
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
А зачем оно вообще нужно, если там данные хранятся в S3?
источник

t

tsla in SDS и Кластерные FS
чувак, ты сам определись и выбери

но Виталий правильно пишет, раз у тебя будет 20ТБ то тут ceph в идеале или seaweedfs (?)

по seaweedfs предлагаю призвать @snels , он большие объемы прода крутить на травке

однозначно минио в попу, взвоешь сам же
источник

t

tsla in SDS и Кластерные FS
ну там же компрессия все дела
источник

S

Sergey in SDS и Кластерные FS
опять фьюз - нафиг
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Ну как я... Всё сделали и оттестили при моём участии. Сейчас админят его другие чуваки. А я наблюдаю за их работой =)
источник

t

tsla in SDS и Кластерные FS
надо тестить конечно, но реально ли она в 10 быстрее с3фс при 16 джобах?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Но проблем, кстати, не было. Его нарошно всяко пытались убить. Не убили.
источник

t

tsla in SDS и Кластерные FS
хера ты делегатор, делегируешь неделегируемые задачи
источник

АС

Артём Семёнов... in SDS и Кластерные FS
Хм, спасибо всем! пойду курить про seaweedfs - не сталкивался раньше. И пинать бизнес, чтоб понять что им надо.
источник

t

tsla in SDS и Кластерные FS
у вас просто админа нормального не было, вот и не шмогли
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Там задача была как раз перевод инфраструктуры в ответственность заказчика.
У нас был цеф. С него и переезжали на что-то другое, с чем готовы работать и мы, и заказчик.
Вот, в итоге так и докатились до сивида.
источник

t

tsla in SDS и Кластерные FS
а тех доку с инструкциями писали? поделиться сможешь?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Бери сивид, не прогадаешь. Он простой и работает хорошо.
источник

АС

Артём Семёнов... in SDS и Кластерные FS
Остался ещё момент, если поднимать seaweedfs/ceph. Как правильнее?
в конторе всё сидит в VM которые в RHV живут, стоит ли выбивать прям голое железо под это дело?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Возможно для себя они там и писали. С нами не делились.
А какая информация интересует?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
У нас в ВМ крутятся ноды сивида. Проблем нет. С цефом было хуже. Избыточность цефа, да ещё и поверх хранилок с рейдом. Ух!
источник