Клиентов надо на 10г сажать) отдельная кластерная даже и не особо нужна, по крайней мере если лишней отдельной десятки нет
В доках ceph пишут, что для кластера нужно выделенная сеть как мин 10Гбит. Поэтому я выделил 10Гбит для кластера, а для клиентов 1Гбит. Думал, если клиент обращается к кластеру, то скорость внутри кластера будет 10Гбит и клиент получит эту скорость. Но, не подумал, как он получить 10Гбит, на своей гигабитной карте.