Size: a a a

SDS и Кластерные FS

2020 December 13

NN

NO Name in SDS и Кластерные FS
Можете ещё посмотреть на lizardfs
источник

S

Scumtron in SDS и Кластерные FS
NO Name
Можете ещё посмотреть на lizardfs
Ага, спасибо. Читаю
источник

VM

Vladimir Manko in SDS и Кластерные FS
Гластер должен подойти - как раз кластер большого размера, особенно если есть георепликация, но 1 гигабит смущает, в принципе заработает, но что с производительностью хз. У РХ в рекомендациях 10 гигабит. Я на 1гбпс поднимал только для тестов архитектуры, но не тестировал производительность.
источник

VM

Vladimir Manko in SDS и Кластерные FS
У гластера бонус овер линстор - нет необходимости в контроллере. Но там на  сколько помню сложнее с архитектурой - надо читать рекомендации по количеству нод и бриксов.
источник

S

Scumtron in SDS и Кластерные FS
Пишут, что Гластер медленный.
источник

AT

Alex Tkachuk in SDS и Кластерные FS
Scumtron
Ага, спасибо. Читаю
А если есть деньги - то на moosefs. Порой мне кажется, что она как раз для видеохостинга и создана
источник

S

Scumtron in SDS и Кластерные FS
Вот по описанию lizardfs, то что нужно. Надо протестировать.
источник

S

Scumtron in SDS и Кластерные FS
Alex Tkachuk
А если есть деньги - то на moosefs. Порой мне кажется, что она как раз для видеохостинга и создана
Спасибо, почитаю
источник

AT

Alex Tkachuk in SDS и Кластерные FS
Обоим нужны мастера (2-3 сервера) с пачкой памяти, ваших 16гб может не хватить
источник

AT

Alex Tkachuk in SDS и Кластерные FS
Ну зависит от количества файлов конечно
источник

VM

Vladimir Manko in SDS и Кластерные FS
Scumtron
Пишут, что Гластер медленный.
ну все относительно =) на небольших конфигурациях 3-5 нод я разницы с цеф не увидел, линстор вышел чутка быстрее, но глюкавее, (все использовалось под сторадж в проксмокс кластере), а у вас 1 гигабит, а так то смотрите сами =)
источник

S

Scumtron in SDS и Кластерные FS
Vladimir Manko
ну все относительно =) на небольших конфигурациях 3-5 нод я разницы с цеф не увидел, линстор вышел чутка быстрее, но глюкавее, (все использовалось под сторадж в проксмокс кластере), а у вас 1 гигабит, а так то смотрите сами =)
Ок, спасибо. ДОбавлю его тоже на тест
источник

VM

Vladimir Manko in SDS и Кластерные FS
РХ в свое время серьезно вложился в него, так что думаю на обычным шпинделях или ссд он себя может нормально показать, думаю на nvme или чем то побыстрее все же проиграет. По своему опыту скажу - все надо тестировать. Какое-либо гарантированное решение с гарантированным качеством может выдать лишь тот кто имеет протестированную и отлаженную под определенные задачи программно-аппаратную платформу. Все остальное, чем мы занимаемся по сути самосбор из железок, софта и решений.
источник

k

kvaps in SDS и Кластерные FS
Scumtron
Я попробовал BeegsFS, вполне достойное решение как я считал, пока не прочитал ваше сообщение про его надежность )
ну возможно это мне с ним не повезло, как говорится доверяй но проверяй
источник

k

kvaps in SDS и Кластерные FS
Scumtron
т.е. на 5 нод с 1 гбит каналом в тесте на боевом клиенте он выдал положенные 5 гбит, при этом нагрузка на машины была копеечная.
там же sparse-чанки, по дефолту на каждый файл 4 sparse-группы, вы buddy mirroring юзали?
источник

VM

Vladimir Manko in SDS и Кластерные FS
Scumtron
Ок, спасибо. ДОбавлю его тоже на тест
посмотрите этот канал и поройтесь у них на сайте (там скрипты, конфиги) - у ребят как раз аналогичные вашим задачи и они активно использовали zfs/ceph/glusterfs https://www.youtube.com/channel/UCV_OrwHDqXdz7JuxjROhetA
источник

M

Murmuring in SDS и Кластерные FS
Vladimir Manko
ну все относительно =) на небольших конфигурациях 3-5 нод я разницы с цеф не увидел, линстор вышел чутка быстрее, но глюкавее, (все использовалось под сторадж в проксмокс кластере), а у вас 1 гигабит, а так то смотрите сами =)
А какие глюки были с линстором? И какая фс была на дисках?
источник

S

Scumtron in SDS и Кластерные FS
kvaps
там же sparse-чанки, по дефолту на каждый файл 4 sparse-группы, вы buddy mirroring юзали?
Да. beegfs-ctl --setpattern --numtargets=4 --chunksize=10M --pattern=buddymirror /var/www/
источник

k

kvaps in SDS и Кластерные FS
Scumtron
Один может быть 100ГБ, другой хочет 10TB места
линстор - не ваш кейс, так как он не умеет одни и теже тома между нодами мазать
источник

k

kvaps in SDS и Кластерные FS
Alex Tkachuk
А если есть деньги - то на moosefs. Порой мне кажется, что она как раз для видеохостинга и создана
плюсую, а что без денег низя?
источник