AZ
У одно из клиентов вечно какая-то жопа с ним
Size: a a a
2019 April 26
AZ
Хотя может он просто не умеет готовить ))
k
Я использую но без IOMMU, на хосте работает вполне стабильно
k
единственное что в бридж его добавить нельзя
2019 April 28
2019 April 29
w
Не совсем про небулу, но зато про HP
Про GPU passthrough (и не только GPU) на HP Proliant G8 (и ниже)
Работает, проверено
http://www.jimmdenton.com/proliant-intel-dpdk/
Про GPU passthrough (и не только GPU) на HP Proliant G8 (и ниже)
Работает, проверено
http://www.jimmdenton.com/proliant-intel-dpdk/
w
Зы. Сразу скажу, что в БИОСе пункта, откл. RMRR для конкретных портов нетути (
Г
Всем привет. У меня сегодня новый вопрос 😊
Дано: 4 ноды сефа, они же ноды небулы. Имена квм-0[1-4]. Развёрнуто было всё как тестовая среда, 1 встроенная сетевуха гигабитная.
Сейчас идёт подготовка к проду, закуплены и вставлены 10 гиговые сетевушки, 10 гиговый свитч.
Но есть проблема. Сначала я хотел сеф целиком перевести на 10 гиговый интерфейс, но у меня не заладилось. Если пытаться перенастраивать ноды, то сеф ругается, что хоснейм и имя, которое я указываю в настройках должны совпадать. Я просто в хостс добавлял зяпись вида сеф-0[1-4] ip10G квм-0[1-4] ip1G. Тогда я поменял ceph.conf и добавил две сети, фронтэнд и бекэнд. Но оказалось, что это работает не совсем так, как я ожидал 😊 Только ребаланс и восстановление идёт по 10 гиговой сетке, а все обращения килентов по 1 гигу. Это проблема, так как на гиге висят все виртуалки, к тому же гиговые интерфейсы периодически зависают, подозреваю, что под нагрузкой, и кластер сефа разваливается, хотя по 10гиговому интерфейсу всё доступно.
Вот теперь я и не знаю, что делать и как быть :) В идеале, конечно, мы откажемся от такой системы и сеф, и квм будут жить отдельно, но что сделать сейчас ума не приложу. Может в ceph.conf указать одинаковые сетки для фронта и бека?
Дано: 4 ноды сефа, они же ноды небулы. Имена квм-0[1-4]. Развёрнуто было всё как тестовая среда, 1 встроенная сетевуха гигабитная.
Сейчас идёт подготовка к проду, закуплены и вставлены 10 гиговые сетевушки, 10 гиговый свитч.
Но есть проблема. Сначала я хотел сеф целиком перевести на 10 гиговый интерфейс, но у меня не заладилось. Если пытаться перенастраивать ноды, то сеф ругается, что хоснейм и имя, которое я указываю в настройках должны совпадать. Я просто в хостс добавлял зяпись вида сеф-0[1-4] ip10G квм-0[1-4] ip1G. Тогда я поменял ceph.conf и добавил две сети, фронтэнд и бекэнд. Но оказалось, что это работает не совсем так, как я ожидал 😊 Только ребаланс и восстановление идёт по 10 гиговой сетке, а все обращения килентов по 1 гигу. Это проблема, так как на гиге висят все виртуалки, к тому же гиговые интерфейсы периодически зависают, подозреваю, что под нагрузкой, и кластер сефа разваливается, хотя по 10гиговому интерфейсу всё доступно.
Вот теперь я и не знаю, что делать и как быть :) В идеале, конечно, мы откажемся от такой системы и сеф, и квм будут жить отдельно, но что сделать сейчас ума не приложу. Может в ceph.conf указать одинаковые сетки для фронта и бека?
AZ
Боролся с аналогичной проблемой, в итоге убрал 1Гб и все пустил по 10.
Г
Тоже, конечно, решение )
ВН
Григорий
Всем привет. У меня сегодня новый вопрос 😊
Дано: 4 ноды сефа, они же ноды небулы. Имена квм-0[1-4]. Развёрнуто было всё как тестовая среда, 1 встроенная сетевуха гигабитная.
Сейчас идёт подготовка к проду, закуплены и вставлены 10 гиговые сетевушки, 10 гиговый свитч.
Но есть проблема. Сначала я хотел сеф целиком перевести на 10 гиговый интерфейс, но у меня не заладилось. Если пытаться перенастраивать ноды, то сеф ругается, что хоснейм и имя, которое я указываю в настройках должны совпадать. Я просто в хостс добавлял зяпись вида сеф-0[1-4] ip10G квм-0[1-4] ip1G. Тогда я поменял ceph.conf и добавил две сети, фронтэнд и бекэнд. Но оказалось, что это работает не совсем так, как я ожидал 😊 Только ребаланс и восстановление идёт по 10 гиговой сетке, а все обращения килентов по 1 гигу. Это проблема, так как на гиге висят все виртуалки, к тому же гиговые интерфейсы периодически зависают, подозреваю, что под нагрузкой, и кластер сефа разваливается, хотя по 10гиговому интерфейсу всё доступно.
Вот теперь я и не знаю, что делать и как быть :) В идеале, конечно, мы откажемся от такой системы и сеф, и квм будут жить отдельно, но что сделать сейчас ума не приложу. Может в ceph.conf указать одинаковые сетки для фронта и бека?
Дано: 4 ноды сефа, они же ноды небулы. Имена квм-0[1-4]. Развёрнуто было всё как тестовая среда, 1 встроенная сетевуха гигабитная.
Сейчас идёт подготовка к проду, закуплены и вставлены 10 гиговые сетевушки, 10 гиговый свитч.
Но есть проблема. Сначала я хотел сеф целиком перевести на 10 гиговый интерфейс, но у меня не заладилось. Если пытаться перенастраивать ноды, то сеф ругается, что хоснейм и имя, которое я указываю в настройках должны совпадать. Я просто в хостс добавлял зяпись вида сеф-0[1-4] ip10G квм-0[1-4] ip1G. Тогда я поменял ceph.conf и добавил две сети, фронтэнд и бекэнд. Но оказалось, что это работает не совсем так, как я ожидал 😊 Только ребаланс и восстановление идёт по 10 гиговой сетке, а все обращения килентов по 1 гигу. Это проблема, так как на гиге висят все виртуалки, к тому же гиговые интерфейсы периодически зависают, подозреваю, что под нагрузкой, и кластер сефа разваливается, хотя по 10гиговому интерфейсу всё доступно.
Вот теперь я и не знаю, что делать и как быть :) В идеале, конечно, мы откажемся от такой системы и сеф, и квм будут жить отдельно, но что сделать сейчас ума не приложу. Может в ceph.conf указать одинаковые сетки для фронта и бека?
Просто цефу укажи 10г а бэк убери
ВН
Ну только мониторы перевешивай по одному
ВН
Либо все сразу но путем правки монмапа
ВН
И все, у тебя будет весь цеф на 10г
Г
mon_initial_members = msk-one-01, msk-kvm-02, msk-kvm-03
mon_host = 192.168.0.13,192.168.0.14,192.168.0.15
auth_cluster_required = cephx
auth_service_required = cephx
auth_client_required = cephx
public network = 192.168.0.0/23
cluster network = 172.17.19.0/24
Вот так выглядит сейчас конфиг.
mon_host = 192.168.0.13,192.168.0.14,192.168.0.15
auth_cluster_required = cephx
auth_service_required = cephx
auth_client_required = cephx
public network = 192.168.0.0/23
cluster network = 172.17.19.0/24
Вот так выглядит сейчас конфиг.
ВН
И qemu никуда не денется, будет к цефу по 10г коннектиться
Г
Когда я попытался перевесить всё на 10 меня не понял сеф, тупо мониторы отваливались, те что на 10 сидели (
ВН
Григорий
Когда я попытался перевесить всё на 10 меня не понял сеф, тупо мониторы отваливались, те что на 10 сидели (
мониторы нельзя перевешивать просто так, они IP помнят
Г
На сайте документации по переводу нет (