AF
Привет всем! У кого-нибудь используется virtio для подключения высокоскоростных сетевых интерфейсов к вм (например, 40ge)? Ну или с 10ge. Как оно ведёт себя при большой нагрузке?
Size: a a a
2019 January 28
k
Привет всем! У кого-нибудь используется virtio для подключения высокоскоростных сетевых интерфейсов к вм (например, 40ge)? Ну или с 10ge. Как оно ведёт себя при большой нагрузке?
я бы советовал SR-IOV или прокидывать целиком интерфес, что бы работало нормально
AF
да, скорее всего так и будет. пока правда проблемы с включением sriov на конкретной карте..
k
а что за карта?
AF
+ sriov ограничивает количество вм на хосте
k
а сколько вы хотите?
AF
Chelsio Communications Inc T580-LP-CR
AF
но это временная карта на макете. потом будет Mellanox Technologies MT27520 Family [ConnectX-3 Pro]
k
Не уверен на счет Chelsio но на Mellanox'е их точно дофига можно нагенерить
AF
в Connect X-3:
Capabilities: [108 v1] Single Root I/O Virtualization (SR-IOV)
IOVCap: Migration-, Interrupt Message Number: 000
IOVCtl: Enable- Migration- Interrupt- MSE- ARIHierarchy+
IOVSta: Migration-
Initial VFs: 8, Total VFs: 8, Number of VFs: 0, Function Dependency Link: 00
VF offset: 1, stride: 1, Device ID: 1004
Supported Page Size: 000007ff, System Page Size: 00000001
Region 2: Memory at 0000384000800000 (64-bit, prefetchable)
VF Migration: offset: 00000000, BIR: 0
Capabilities: [108 v1] Single Root I/O Virtualization (SR-IOV)
IOVCap: Migration-, Interrupt Message Number: 000
IOVCtl: Enable- Migration- Interrupt- MSE- ARIHierarchy+
IOVSta: Migration-
Initial VFs: 8, Total VFs: 8, Number of VFs: 0, Function Dependency Link: 00
VF offset: 1, stride: 1, Device ID: 1004
Supported Page Size: 000007ff, System Page Size: 00000001
Region 2: Memory at 0000384000800000 (64-bit, prefetchable)
VF Migration: offset: 00000000, BIR: 0
k
а вон оно что
SR-IOV support; 16 virtual functions supported by KVM and Hyper-V (OS dependant) up to a maximum of 127 virtual functions supported by the adapter
SR-IOV support; 16 virtual functions supported by KVM and Hyper-V (OS dependant) up to a maximum of 127 virtual functions supported by the adapter
k
то есть это ограничение в ядре в самом
AF
Initial VFs: 8, Total VFs: 8, Number of VFs: 0, Function Dependency Link: 00 — это их 8 в максимуме...
k
ты где это смотришь? у меня как раз Connect X-3 могу проверить
AF
на живом оборудовании. у меня тоже есть (но на других узлах пока)
AF
можете проверить на своем?:
k
можете проверить на своем?:
хм, похоже ты прав, у меня двухпортовая
Mellanox Technologies MT27520 Family [ConnectX-3 Pro], больше 7 VF загрузить не удалосьAF
ну да.. так что это ограничение.. но для нас это не проблема, т.к. пользовательские вм будут через 10ге работать (пока планируем через virtio) . проблема в "системной" вм, которая контроллер небулы выполняет. есть нужны честные 40ге.. на данный момент в ней chelsio через virtio и скорость при выгрузке машин с узлов падает катастрофично
2019 January 29
I
Доброе утро. Можете проконсультировать? вопрос по хранилищу iSCSI - не могу подключить.