Size: a a a

SDS и Кластерные FS

2020 October 27

i

ivdok in SDS и Кластерные FS
Ext4 не знаю, как в кластере поведёт себя
источник

NS

Nik Sh in SDS и Кластерные FS
ivdok
XFS наверное
а как шарить по нодам?
источник

i

ivdok in SDS и Кластерные FS
Скорее всего печально
источник

NS

Nik Sh in SDS и Кластерные FS
ivdok
Ext4 не знаю, как в кластере поведёт себя
они не шареные вообще
источник

i

ivdok in SDS и Кластерные FS
Nik Sh
а как шарить по нодам?
DRBD
источник

МК

Марк ☢️ Коренберг... in SDS и Кластерные FS
Nik Sh
Товарищи, что посоветуете для решения такой задачи? Есть сервера виртуализации, подключенные по 10г, с nvme  слотами пустующими, есть бюджета на 3 nvme по 2 тб. Задача - сделать из этого шареную фс с 600 гб  джипегов, которую надо подмонтировать к 8ми серверам, каждый из которых должен записывать файлы(вероятность записи в один и тот же файл практически исключена). Перед серверами стоит cdn, так что производительность не в приоритете, но все-таки хочется сохранить ее на приемлемом уровне. В голову лезет только cephfs, но на трех узлах вроде не советуют делать. HA-NFS поверх drbd? GFS2 ?
Чот на S3 похоже
источник

МК

Марк ☢️ Коренберг... in SDS и Кластерные FS
Миньио ?
источник

NS

Nik Sh in SDS и Кластерные FS
ivdok
DRBD
и что будет если я запишу с разных нод разные файлы? фарш в метаданных и ошибки
источник

NS

Nik Sh in SDS и Кластерные FS
Марк ☢️ Коренберг
Чот на S3 похоже
не, приложение не умеет в с3
источник

NP

Nick Potemkin in SDS и Кластерные FS
Nik Sh
а как шарить по нодам?
DRBD -  FS(ext4, xfs, zfs) - NFS
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Nik Sh
Товарищи, что посоветуете для решения такой задачи? Есть сервера виртуализации, подключенные по 10г, с nvme  слотами пустующими, есть бюджета на 3 nvme по 2 тб. Задача - сделать из этого шареную фс с 600 гб  джипегов, которую надо подмонтировать к 8ми серверам, каждый из которых должен записывать файлы(вероятность записи в один и тот же файл практически исключена). Перед серверами стоит cdn, так что производительность не в приоритете, но все-таки хочется сохранить ее на приемлемом уровне. В голову лезет только cephfs, но на трех узлах вроде не советуют делать. HA-NFS поверх drbd? GFS2 ?
Нахер NFS. Используй s3
источник

МК

Марк ☢️ Коренберг... in SDS и Кластерные FS
Nik Sh
не, приложение не умеет в с3
Уволиться / выебать афтора / переписать
источник

i

ivdok in SDS и Кластерные FS
Видел отзыв, что тоже плохо скалируется
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Nik Sh
не, приложение не умеет в с3
Надо научить
источник

NS

Nik Sh in SDS и Кластерные FS
Nick Potemkin
DRBD -  FS(ext4, xfs, zfs) - NFS
да пока сам склонялся к этому, но думал может какая шаренная фс  есть под такой кейс
источник

NP

Nick Potemkin in SDS и Кластерные FS
ocsf2
но это не точно )
источник

i

ivdok in SDS и Кластерные FS
Nik Sh
да пока сам склонялся к этому, но думал может какая шаренная фс  есть под такой кейс
OCFS2 использую, но у неё backing storage один, поэтому не советую
источник

МК

Марк ☢️ Коренберг... in SDS и Кластерные FS
Nik Sh
да пока сам склонялся к этому, но думал может какая шаренная фс  есть под такой кейс
Проблему надо сначала создать, а потом героинчески решить
источник

NS

Nik Sh in SDS и Кластерные FS
ivdok
OCFS2 использую, но у неё backing storage один, поэтому не советую
под нее как раз drbd  положить можно
источник

i

ivdok in SDS и Кластерные FS
Nik Sh
под нее как раз drbd  положить можно
Сценарий не тот
источник