Новый монитор или новый osd? Или что?

новый монитор

osd добаились нормально

А ceph-deploy mon create было сделано?

конечно

тогда надо проверить, поднял ли systemd сервис монитора

systemctl status ceph-mon@[HOSTNAME]

проверял, он запущен

systemctl status ceph-mon@prod-appl20
● ceph-mon@prod-appl20.service - Ceph cluster monitor daemon
  Loaded: loaded (/usr/lib/systemd/system/ceph-mon@.service; enabled; vendor preset: disabled)
  Active: active (running) since Fri 2021-08-20 11:31:37 MSK; 2h 11min ago
Main PID: 10175 (ceph-mon)
  CGroup: /system.slice/system-ceph\x2dmon.slice/ceph-mon@prod-appl20.service
          └─10175 /usr/bin/ceph-mon -f --cluster ceph --id prod-appl20 --setuser ceph --setgroup ceph

если сделать ceph node ls, я не вижу этой ноды в мониторах

ceph -s

судя по тормозам на виртуалке, хуже)

Ну, я мягко сказал что примерно так же

:-)

Как сеф, развернутый на виртуалках?

ну там латенси секундное

А кто-нибудь всерьёз бенчил цеф в цефе?))

osd на rbd в том же цефе

Ага

перестроится кластер, после добавления osd и пришлю

я делал, 0/10