Size: a a a

SDS и Кластерные FS

2020 September 05

UD

Uncel Duk in SDS и Кластерные FS
неймспейс прокинуть в кему или что там у вас
источник

n

nanomechanic in SDS и Кластерные FS
дерьмово работает, вариант только проброс
источник

n

nanomechanic in SDS и Кластерные FS
неймспейс не получится, эффект тот же, надо pcie девайс
источник

n

nanomechanic in SDS и Кластерные FS
мне надо под прод кластер минимум три сервера, два с синхронной репликаций, один с асинхронной и архивом всей херни со снэпшотами на zfs (из-за этого асинхронная репликация) для засылки снэпшотов в DR датацентр
источник

n

nanomechanic in SDS и Кластерные FS
программеры понаписали таких ахуительных запросов, что лучше 3 или 4 сервера, тому шо с такими запросами один клиент может сайт заддосить ежели постгресс в виртуалке с 12 ядрами =)
источник

R

Roman in SDS и Кластерные FS
nanomechanic
вот, интересно, есть профит или нет, от запиливания гиперконвергентности на муншоте. например на блейдах с четырьмя xeon d-xxxx. в каждый блейд можно запихнуть но 4 маленьких m.2 nvme, поставить ceph а в качестве полезной загрузки гонять что-нибудь под кубернетисом.
@kvaps  же рассказывал, что у него на муншотах ВМ и Линстор
источник

t

tsla in SDS и Кластерные FS
Так по твоей ссылке снизу - как раз есть и вариант с атомами
источник

A

Alex in SDS и Кластерные FS
tsla
Так по твоей ссылке снизу - как раз есть и вариант с атомами
А, ну один из вариантоф
источник

t

tsla in SDS и Кластерные FS
nanomechanic
в виртуалках 40к iops NVME на хосте режется до 10к, из-за latency
Кинь деталей, мож ты что-то не так подкрутил?

Локальный нвме 40к, ты прокидыаештна ВМ и 10к?

Какой шедулер юзаешь? Cfq?
источник

k

kvaps in SDS и Кластерные FS
nanomechanic
вот, интересно, есть профит или нет, от запиливания гиперконвергентности на муншоте. например на блейдах с четырьмя xeon d-xxxx. в каждый блейд можно запихнуть но 4 маленьких m.2 nvme, поставить ceph а в качестве полезной загрузки гонять что-нибудь под кубернетисом.
Именно так и юзаем, только не с цефом а с линстором
источник

n

nanomechanic in SDS и Кластерные FS
tsla
Кинь деталей, мож ты что-то не так подкрутил?

Локальный нвме 40к, ты прокидыаештна ВМ и 10к?

Какой шедулер юзаешь? Cfq?
mq, none. пофигу. это виртуализация/virtio-blk тормозит. на хосте все норм. чтобы не тормозило надо или пробрасывать или жертвовать ядрами под SPDK или mdev nvme драйвер
источник

k

kvaps in SDS и Кластерные FS
nanomechanic
я бы лучше к этому hp moonshot припахал, но боюсь что к нему блейдов с возможностью установки mxm видюх нет
Видюхи на муншот не поставишь
источник

k

kvaps in SDS и Кластерные FS
nanomechanic
три корзины по 720 ядер, 175 nvme osd...
Цефу всё же лучше отдельных серваков нарезать
источник

n

nanomechanic in SDS и Кластерные FS
kvaps
Видюхи на муншот не поставишь
нету картриджей с mxm?
источник

k

kvaps in SDS и Кластерные FS
nanomechanic
нету картриджей с mxm?
Последний раз смотрел, не было
источник

k

kvaps in SDS и Кластерные FS
Мы m710x юзаем преимущественно
источник

t

tsla in SDS и Кластерные FS
kvaps
Именно так и юзаем, только не с цефом а с линстором
Я не хочу сказать, что вы взяли гаумно, но не зря его называют MoShit
источник

n

nanomechanic in SDS и Кластерные FS
сейчас можно купить amd s7150 в mxm формате, это 8 гиг видеопамяти + sr-iov для VDS
источник

t

tsla in SDS и Кластерные FS
Картриджи (блэйды) постоянно глючили, после прошивки вроде норм стало, но вылетали знатно
источник

n

nanomechanic in SDS и Кластерные FS
nanomechanic
сейчас можно купить amd s7150 в mxm формате, это 8 гиг видеопамяти + sr-iov для VDS
в смысле ДЕШЕВО купить, за 130 баксов.
источник