Size: a a a

SDS и Кластерные FS

2021 April 01

MK

Mikhail Krivoshein in SDS и Кластерные FS
Dmitry Polyakov
Интересно какой процент чата живет не по MSK, кстати
😂👍
источник

A

Alex in SDS и Кластерные FS
Блять как я тут оказался
источник

A

Alex in SDS и Кластерные FS
источник

IF

Irek Fasikhov in SDS и Кластерные FS
Груздов, явно не по МСК живёт )
источник

IF

Irek Fasikhov in SDS и Кластерные FS
Nick Potemkin
Жители Самары точно знают что произошло )
В Самаре +1?
источник

NP

Nick Potemkin in SDS и Кластерные FS
ну да, там UTC+4 )
источник

IF

Irek Fasikhov in SDS и Кластерные FS
Nick Potemkin
ну да, там UTC+4 )
Интересно)
источник

V

Vikentsi in SDS и Кластерные FS
Капец. Кандратий чуть не хватил. Последний оплот продали карпарастам
источник

NP

Nick Potemkin in SDS и Кластерные FS
главное не светить названием завтра - а то набегут )))
источник

IF

Irek Fasikhov in SDS и Кластерные FS
:)
источник

ММ

М М in SDS и Кластерные FS
/leave в пизду вас
источник

S

Shura;) in SDS и Кластерные FS
Коллеги. Не сочтите за вброс или холиварный вопрос от новенького в чате. Исходные: собственный дц на 75 стоек, дизель, пожаротушения, охлаждение, отдельное здание, 120 гб/сёк входящий линк (а точнее 6 по 20 гб), на днях расширение до 140 гб. Внутри сетка eth с топологией звезда 10 гб/сек. Для заказа возможно развернуть сеть ИнфиниБенд параллельно! с eth (да, в серверах и eth и ib карты одновременно). Собственно сам заказ: отказоустойчивый кластер виртуалок (базово заказывается xen но можно продавать на kvm виртуальзацию) к количестве 500-600, все на линукс. Размер каждой 100-160 гб. Позиции заказчика спецефичны: максимальный опенсорс! Никаких  fc, vmware, и прочих простых путей (по сути внегласно - мы начитались про  iscsi  и rdma, хотим так но вы попробуйте переубедить). Заказчик готов купить новые сервера и схд (40-50 k$ штука). Важный нюанс - все на новейших U.2 дисках,   сеть не должна стать узким местом.
Вопрос от дитя далёкого от iscsi (меня): насколько вообще он отказоустойчив и есть ли альтернатива ему при данных вводных?  На текущий момент в голову пришло только: в сервера втыкнуть и  ib и eth сетевые, трафик к схд пустить ib сетке используя iser, а в интернет виртуалки пускать по eth.
источник

S

Shura;) in SDS и Кластерные FS
Сам читаю и понимаю "бредовость"... но условия есть  условия....
источник

A

Alexander in SDS и Кластерные FS
Shura;)
Коллеги. Не сочтите за вброс или холиварный вопрос от новенького в чате. Исходные: собственный дц на 75 стоек, дизель, пожаротушения, охлаждение, отдельное здание, 120 гб/сёк входящий линк (а точнее 6 по 20 гб), на днях расширение до 140 гб. Внутри сетка eth с топологией звезда 10 гб/сек. Для заказа возможно развернуть сеть ИнфиниБенд параллельно! с eth (да, в серверах и eth и ib карты одновременно). Собственно сам заказ: отказоустойчивый кластер виртуалок (базово заказывается xen но можно продавать на kvm виртуальзацию) к количестве 500-600, все на линукс. Размер каждой 100-160 гб. Позиции заказчика спецефичны: максимальный опенсорс! Никаких  fc, vmware, и прочих простых путей (по сути внегласно - мы начитались про  iscsi  и rdma, хотим так но вы попробуйте переубедить). Заказчик готов купить новые сервера и схд (40-50 k$ штука). Важный нюанс - все на новейших U.2 дисках,   сеть не должна стать узким местом.
Вопрос от дитя далёкого от iscsi (меня): насколько вообще он отказоустойчив и есть ли альтернатива ему при данных вводных?  На текущий момент в голову пришло только: в сервера втыкнуть и  ib и eth сетевые, трафик к схд пустить ib сетке используя iser, а в интернет виртуалки пускать по eth.
В качестве альтернативы iscsi можешь рассматривать srp.
Отказоустойчивость ib можно обеспечить средствами самого IB (что, впрочем не исключает необходимости также обеспечивать отказоустойчивость на уровне архитектуры).
Использовать eth или нет - зависит от потребностей и выбора способов их удовлетворения: можно юзать и ipoib, если учитывать его ограничения (отсутствие eth-совместимого L2 без использования оверлейных сетей, пропускная способность, ограниченная CPU и т.д.)
источник

A

Alexander in SDS и Кластерные FS
Shura;)
Сам читаю и понимаю "бредовость"... но условия есть  условия....
Да не то чтобы бредовые: у облачного провайдера scalaxy из начала прошлого десятилетия была очень похожая архитектура. Конвергентная сеть на базе IB (впрочем, сторадж был выделенный), XEN в качестве виртуализации, и в целом все построено на опенсорсе.
источник

S

Shura;) in SDS и Кластерные FS
Спасибо, почитаю о них. Просто на душе такое чувство, что леплю пулю из говна....
источник

A

Alexander in SDS и Кластерные FS
Shura;)
Спасибо, почитаю о них. Просто на душе такое чувство, что леплю пулю из говна....
В зависимости от прямоты рук лепщика результат может варьироваться.
Да, чтобы собрать инфру из опенсорса, квалификация нужна повыше, чем чтобы собрать такую же из проприетарных компонентов по гайдлайнам вендора.
Но и результат может получиться лучше за счет большей гибкости и заточенности под условия задачи.
источник

S

Shura;) in SDS и Кластерные FS
Да куда я денусь) слеплю  конечно. На неделе соберу тестовый стенд из парочки серверов, иб свича ну и схд какой то, и буду гонять тесты пока не удовлетворюсь результатами. За советы ещё раз спасибо, всем ночи
источник

A

Alexander in SDS и Кластерные FS
Shura;)
Да куда я денусь) слеплю  конечно. На неделе соберу тестовый стенд из парочки серверов, иб свича ну и схд какой то, и буду гонять тесты пока не удовлетворюсь результатами. За советы ещё раз спасибо, всем ночи
Как куда денешься? Всегда можно облажаться и слиться :)
Но задача интересная, правда, делать её лучше не одному.
источник

S

Shura;) in SDS и Кластерные FS
Делать буду не сам, со мной есть очень толковый линукс сисадмин (но он крут по ОС линукс, а не по сетям) и команда программеров которая обеспечит взаимосвязь виртуалок и юзеров. На мне архитектура и отказоустойчивость.
источник