не понял про "рут пула в осд", мне кажется такого понятия в цефе нет

Crush root есть, а как еще создать из одного osd?

а, ну вот можно наверное сделать ceph osd crush rule create-replicated one_osd osd.xxx replicated, чо-нить такое
ещё можно просто создать пул скажем с 8 пг и все их upmap-ами прибить на один осд

а цель сего действа какая?

Ну да, я про первый вариант и подумал, а можно как-то обойтись одним пулом на все осд попробовать?

это для бенчей?

Просто не нужно тратить хранилище на репликацию под один из типов ворклоадов

А диски уже в цефе

А зачем именно на один осд?

Ну, иначе возможна ситуация, когда умрет один осд и покорраптятся все шарды?

Или я ошибаюсь

Ну предположим есть 3 шарда, каждый разбился на 3 объекта, первый объект каждого шарда лежит на одном из осд, он умер, все три покорраптились

Ну а если в пуле в целом 1 осд, то ведь тоже, если умрет конкретно он, то все?

Да, идея в том чтобы один вольюм лежал на одном осд)

А, ну ясно...
Ну да, тут только отдельными пулами. Один рбд к одному осд в рамках общего пула не прибьешь

Это вам в линстор))

А есть вообще какой-то способ это адекватно сделать, не выводя диски из цефа? Типа ceph nfs есть я слышал

Я думаю, что нет... объекты ложатся в пул, выбирая пг по хешу имени, объекты 4 мб что в cephfs, что в rbd, что в rgw. Условно тут только если сделать размер объекта терабайт))) но во-первых там лимит, во-вторых если б его и не было, то оно бы сдыхало при таком размере объекта с гарантией 100%

Это да(

Что забавно, у меня в vitastor при похожей на цеф архитектуре с пулами, осд и пг это сделать, кажется, можно)) у меня там есть настройка, которая задает размер блока на диске, ложащегося всегда в одну и ту же пг. Т.е например объект 128 кб, а эта настройка = 10 ТБ и тогда все объекты каждых 10 ТБ лягут в один и тот же осд... правда, сейчас в итоге вообще все образы лягут тупо в первую пг при этом)). Т.к. я когда пилил снапшоты, сделал что id образа не участвует в формировании хеша. А участвует только смещение. Хы