ВН
Ну когда я вот себе бэу домой беру то таки жаба душит
Size: a a a
2021 April 28
ВН
Там просто в RDMA прикол в том, что оно месседж бейзед, но чтобы оно быстро работало - ты должен запрос чтения запостить заранее, ещё до того как пришли данные, причём запрос сразу должен быть такой, чтобы в него влезало целиком сообщение. Иначе отправитель при попытке отправки получает отлупы и идут повторные передачи пакетов, RNR (receiver not ready) retransmission
ВН
Но при этом принимающая сторона-то НЕ ЗНАЕТ, в каком порядке придут ответы (а запросы чтения поедаются просто по порядку)
ВН
И поэтому, по факту, как они сразу не догадались там теги реализовать, чтобы можно было снабжать сообщение ID-шником (тегом), по которому матчилось бы сообщение на отправке и на приёме - я хз
ВН
Вот только получается к ConnectX-5 они до этого допёрли наконец
ВН
А, лол, зато с Tag Matching-ом у них max_sge=1
VL
дело было в
auth_allow_insecure_global_id_reclaim = true который теперь во всех новых cephах для митигации уязвимостиW
О, не я один на это присел :)
VL
обновление до последнего патча (14.2.20) решает проблему так же.
2021 April 29
F7
народ, через cephadm вообще можножно развернуть не в контейнере ?
F7
через cephadm bootstrap не углядел параметра такого
ВН
Что, ансибл не ансиблит?)))
F7
ансиблит. когда выкорчивал из плейбука этот сраный параметр всё завелось
F7
но мнеж нужно не тупо поставить что бы как-то пработало, а перепробоваь разные варианты, найти удобное решение
F7
да вот всёже думаю может попробовать контейнеры, только разобраться что бы он через orch не "мигрировал" между хостами.
F7
так как чую что один фиг на новых версиях они будут давить на контейнеры и тд и тп
S
cephadm же как раз пилился что бысие дело в контейнерах разворачивать
ВН
да пошли они в жопу, давать они будут