Size: a a a

SDS и Кластерные FS

2020 December 14

n

nanomechanic in SDS и Кластерные FS
слишком сложно для восприятия через слух
источник

n

nanomechanic in SDS и Кластерные FS
есть чо почитать ?
источник

A

Alex in SDS и Кластерные FS
nanomechanic
есть чо почитать ?
источник

n

nanomechanic in SDS и Кластерные FS
не, про ред панду. с кафкой и так все ясно
источник

n

nanomechanic in SDS и Кластерные FS
а Тарасу надо попробовать себя в качестве актера. Злодеев играть.
источник

p

pragus in SDS и Кластерные FS
источник

p

pragus in SDS и Кластерные FS
nanomechanic
а Тарасу надо попробовать себя в качестве актера. Злодеев играть.
А чем он знаменит?
источник

С

Сергей in SDS и Кластерные FS
Коллеги, подскажите нубу, плз - есть группа серверов с DAS из SSD, на этих серверах планируют растянуть GlusterFS. Есть ли смысл вообще в использовании аппаратного RAID в серверах или достаточно HBA и создания бриксов отдельно на каждом накопителе?
источник

С

Сергей in SDS и Кластерные FS
Накопителей, допустим, в каждом сервере по 10шт.
источник

🍺N

🍺 Ilya Nicolaev in SDS и Кластерные FS
Коллеги, есть задача сделать распределенное хранилище для миллиона мелких объектов (изображения). Серверов - от 4 до 10. Насколько целесообразно использовать для этого minio? Как он себя поведет?
источник

С

Сергей in SDS и Кластерные FS
Сергей
Накопителей, допустим, в каждом сервере по 10шт.
хотя, наверное, логично лишнюю нагрузку на проц не перекладывать с RAID-контроллера?)
источник

k

kvaps in SDS и Кластерные FS
🍺 Ilya Nicolaev
Коллеги, есть задача сделать распределенное хранилище для миллиона мелких объектов (изображения). Серверов - от 4 до 10. Насколько целесообразно использовать для этого minio? Как он себя поведет?
Спорно, и да и нет, во первых стоит принимать во внимание что minio иммутабелен, его нельзя расширить, только деплоить новые кластера.
источник

🍺N

🍺 Ilya Nicolaev in SDS и Кластерные FS
kvaps
Спорно, и да и нет, во первых стоит принимать во внимание что minio иммутабелен, его нельзя расширить, только деплоить новые кластера.
Ну не совсем так. В кластер можно добавлять новые группы, я это тестировал и оно работает. А какие еще варианты есть? Кто что использует?
источник

k

kvaps in SDS и Кластерные FS
Во вторых насколько быстрый должен быть отклик. Слышал минио начинает жутко тупить при большом количестве объектов, т.к. на каждый из них создаёт директорию в фс, в теории на XFS проблем быть не должно
источник

k

kvaps in SDS и Кластерные FS
Про практический опыт можно в @minio_s3 пораспрашивать ещё
источник

k

kvaps in SDS и Кластерные FS
🍺 Ilya Nicolaev
Ну не совсем так. В кластер можно добавлять новые группы, я это тестировал и оно работает. А какие еще варианты есть? Кто что использует?
Я бы глянул на seaweedfs ещё
источник

🍺N

🍺 Ilya Nicolaev in SDS и Кластерные FS
kvaps
Во вторых насколько быстрый должен быть отклик. Слышал минио начинает жутко тупить при большом количестве объектов, т.к. на каждый из них создаёт директорию в фс, в теории на XFS проблем быть не должно
Ну у нас там структура каталогов с глубокой вложенностью
источник

k

kvaps in SDS и Кластерные FS
kvaps
Я бы глянул на seaweedfs ещё
Слышал несколько success stories с ней
источник

🍺N

🍺 Ilya Nicolaev in SDS и Кластерные FS
kvaps
Я бы глянул на seaweedfs ещё
Глядел, но мне достаточно быстро удалось его ушатать до неработоспособного состояния
источник

k

kvaps in SDS и Кластерные FS
🍺 Ilya Nicolaev
Ну у нас там структура каталогов с глубокой вложенностью
Так минио не предоставляет POSIX, только S3
источник