Size: a a a

SDS и Кластерные FS

2021 May 29

Н

Николай in SDS и Кластерные FS
Ладно, почитаю подробно
источник

В

Васька in SDS и Кластерные FS
В смысле он флашит, а бекапит вим сам
источник

Н

Николай in SDS и Кластерные FS
У меня брат в Veeam сейчас работает, хоть буду знать, чем они там занимаются
источник

В

Васька in SDS и Кластерные FS
Вим+снап+рсинк документов. И жизнь прекрасна)
источник

Н

Николай in SDS и Кластерные FS
Но я хотел бы ещё в облако делать одну копию. Посмотрю, как это всё можно интегрировать
источник

D

Djony in SDS и Кластерные FS
Приветствую, профессионалы! Подскажите, пожалуйста. Вопрос хранения картинок на сервере, изначально хотел хранить всё в папках, в БД сохраняя относительные пути, но случайно узнал про minio, потом seaweedfs. Это и правда лучше папок и тд? Стоит копать в эту сторону? Картинок будет много больше Тб. Заранее спасибо! И какую лучше систему выбрать?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Минио - говно. А дальше уже думай сам.
Сивид збс. Но задача не очень ясно раскрыта. Что нужно-то в конечном итоге?
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Вообще, поднимай из трёх нод сивид. И всё будет хорошо. Если будет нужно - будешь масштабировать.
источник

D

Djony in SDS и Кластерные FS
На сервере хранятся картинки, привязанные к записям таблицы БД. При запросе пользователя определенной записи , ему "отдаются" данные и картинки.
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Отказоустойчивость, масштабирование. Какие требования к хранилищу?
А то выбор между распределённым хранилищем и папочками на диске несколько странный.
источник

D

Djony in SDS и Кластерные FS
Отказоустойчиврсть - можно же raid, а по масштабируемости - пока дальше добавления дисков, не представляю) я в плане скорости отдачи и удобства работы с большим количеством файлов. С другой стороны - сложность входа (установка и настройка) сивида. Или в моем случае файлы в папках лучше? Хочу выбрать оптимальный способ.
источник

GM

George Melikov in SDS и Кластерные FS
Если вам локальное решение ок, то с него стоит и начать. Иначе - можно смотреть в сторону s3 хранилищ
источник

D

Djony in SDS и Кластерные FS
Спасибо!🙏
источник

SM

Stanislav Motriy in SDS и Кластерные FS
Если нет возможности и опыта, чтобы  сейчас использовать что-то сложное, то не парься. Потом надо будет - мигрируешь в более осмысленный вариант.
источник

Н

Николай in SDS и Кластерные FS
Народ, а такой вопрос. Вот предположим, сохранил я большой файл в 10 Гб в ZFS, снял снапшот, а потом перезаписал этот же файл сверху таким же, но в самом конце отличается 100Кб, допустим. Что произойдёт? ZFS запишет только разницу (в соответствии с recordsize)  или нет?
источник

n

nanomechanic in SDS и Кластерные FS
смотря как файл sparse или нет, флажок резервирования  места стоит или нет
источник

n

nanomechanic in SDS и Кластерные FS
на датасете
источник

Н

Николай in SDS и Кластерные FS
Ну просто идея такая: нельзя ли сделать дедуп в таком виде: загружаешь в массив бекап, делаешь снапшот, а следующую версию рсинком сверху
источник

n

nanomechanic in SDS и Кластерные FS
а ты попробуй
источник

Н

Николай in SDS и Кластерные FS
:)
источник