своп долго освобождаться будет

Отключи и перезагрузи

Нахрена его руками освобождать

У нас на днях было такое. База мониторов росла несколько дней

Затем когда они пришли все трое к кворуму базы уменьшилась

Кстати мы откючали ребаланс чтобы ускорить процесс создания полного кворума

перезагрузка никакого результата не дала, отключил pve15, который вне кворума. Тоже без результата

@Symba2015 я бы тоже подождал, но банально место кончится

?

пытаюсь 3й монитор сделать, но пока что никак. Удалил, затем заново добавил, но всё равно не поднимается

health: HEALTH_WARN
           1 daemons have recently crashed

root@pve15:~# ceph -s
 cluster:
   id:     1dcecec6-60ab-46f2-a923-3453cd148171
   health: HEALTH_WARN
           1 daemons have recently crashed
           998 slow ops, oldest one blocked for 58 sec, daemons [mon.pve05,mon.pve10] have slow ops.
           mons pve05,pve10 are using a lot of disk space
           mons pve05,pve10 are low on available space
           1/3 mons down, quorum pve10,pve05

 services:
   mon: 3 daemons, quorum pve10,pve05 (age 9m), out of quorum: pve15
   mgr: pve05(active, since 55m), standbys: pve15, pve10
   osd: 105 osds: 105 up (since 14m), 105 in (since 4h)

 data:
   pools:   2 pools, 2048 pgs
   objects: 10.22M objects, 39 TiB
   usage:   70 TiB used, 35 TiB / 105 TiB avail
   pgs:     2048 active+clean

root@pve15:~# ceph daemon mon.pve15 mon_status
{
   "name": "pve15",
   "rank": 2,
   "state": "synchronizing",

С кластера блочка выдаётся?

Если да, то сетевую связность проверить между ВСЕМИ осд серверами и гиперами

к сожалению, сетка одна, связность есть

Пропто удалил добавил или реинсталил

Посмотри что в краш репорте

root@pve05:~# ceph -s
 cluster:
   id:     1dcecec6-60ab-46f2-a923-3453cd148171
   health: HEALTH_OK

нужно было ждать...