Запусти принудительно scrub на всех OSD.

посмотри через ceph -s, посмотри ceph df, какой пул забит
(кстати, capacity в 30 гб - мощно)

плюс, как я понял, у тебя rbd, а там есть отложенное удаление

rbd trash ls

походу накрылось все медным тазом
я почему не могу удалить replicapool
я так понял что его и нет
[root@rook-ceph-tools-77f4f75cdd-7mklh /]# rbd trash list
rbd: error opening default pool 'rbd'
Ensure that the default pool has been created or specify an alternate pool name.

[root@rook-ceph-tools-77f4f75cdd-7mklh /]# ceph df
--- RAW STORAGE ---
CLASS  SIZE    AVAIL    USED    RAW USED  %RAW USED
hdd    30 GiB  914 MiB  26 GiB    29 GiB      97.02
TOTAL  30 GiB  914 MiB  26 GiB    29 GiB      97.02

--- POOLS ---
POOL                   ID  PGS  STORED   OBJECTS  USED     %USED   MAX AVAIL
device_health_metrics   1    1   52 KiB        3  155 KiB  100.00        0 B
replicapool             2   32  8.7 GiB    2.32k   26 GiB  100.00        0 B

Дропни replicapool, он у тебя все место выжрал. Или данные в нём.
ceph osd pool remove replicapool replicapool --yes-blet
Или
rbd -p replicapool ls
rbd remove replicapool/$image_name

Спасибо, ожил ceph

Ну прост доку почитай как rbd юзать и всё. А ещё лучше смотреть стату через консольку. Надежнее и проще, дашборд порой отваливается и тупит. Им вообще я давно не пользовался...
ceph status
ceph healt detail

ceph osd tree
ceph osd df

google:
 ceph rbd usage
 ceph perfomance
 ceph troubleshooting

80%

90%
     storage: 9Gi
где 20% нужно оставлять?

опять та же хреть

volume намертво повисает

у тебя 30 гигабайт всего на дисках, сохраняешь ты три копии данных, тоесть 30/3 = 10Гб стореджа у тебя всего доступно, чтобы диск небыл забит, надо хранить не больше 8Гб

30 гб это пикокластер

Там базы же одни по паре гигов сожрут на каждом осд

docs.ceph.com 😩

да не, на таких объемах не сожрут

та я думаю не сожрут, там данных нет чтобы жрать :)

тут больше вопрос при создании OSD сколько он от диска отожрет для резерва под базу