во время обновления сетевого железа одну из коробок как-то хитро распидарасило что часть трафа заблекхолиось и осдшки перестреляли друг друга к хуям, при этом импактило только один цод, т.е. если бы осд учитывали размещение ВОЗМОЖНО все было бы збс.
у меня включен авто ребалансинг, я подключил OSD, естественно, все завертелось. Вопрос только в том, почему в этом принимают участие OSD которые я использую в EC пуле, которые по идее изолированны девайс классом и балансируются на уровне OSD\
разобрался почему: из-за апгрейда ceph под проксмоксом. OSD остались в режиме совместимости с люминисом. столько боли было из--за этого