с  octopus такого не было!

чистый тестовый кластер 2X36 hdd + 24 hdd так завести не смог с нуля 16.4.2

ceph versions
{
   "mon": {
       "ceph version 16.2.4 (3cbe25cde3cfa028984618ad32de9edc4c1eaed0) pacific (stable)": 3
   },
   "mgr": {
       "ceph version 16.2.4 (3cbe25cde3cfa028984618ad32de9edc4c1eaed0) pacific (stable)": 2
   },
   "osd": {},
   "mds": {},
   "overall": {
       "ceph version 16.2.4 (3cbe25cde3cfa028984618ad32de9edc4c1eaed0) pacific (stable)": 5
   }
}

Вот такую ошибку выловил при добавлении дисков
cephadm [ERR] cephadm exited with an error code: 1, stderr:Traceback (most recent call last):

терйс то покажи, самое интересное обрезал )

mgr.st01.bilatz (mgr.41549) 1862 : cephadm [ERR] cephadm exited with an error code: 1, stderr:Traceback (most recent call last):
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 8029, in <module>
   main()
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 8017, in main
   r = ctx.func(ctx)
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4659, in command_ls
   ls = list_daemons(ctx, detail=not ctx.no_detail,
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4713, in list_daemons
   seen_memusage[cid] = with_units_to_int(used)
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4682, in with_units_to_int
   return int(float(v) * mult)
ValueError: could not convert string to float: '--'
Traceback (most recent call last):
 File "/usr/share/ceph/mgr/cephadm/serve.py", line 1144, in _remote_connection
   yield (conn, connr)
 File "/usr/share/ceph/mgr/cephadm/serve.py", line 1059, in _run_cephadm
   code, '\n'.join(err)))
orchestrator._interface.OrchestratorError: cephadm exited with an error code: 1, stderr:Traceback (most recent call last):
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 8029, in <module>
   main()
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 8017, in main
   r = ctx.func(ctx)
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4659, in command_ls
   ls = list_daemons(ctx, detail=not ctx.no_detail,
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4713, in list_daemons
   seen_memusage[cid] = with_units_to_int(used)
 File "/var/lib/ceph/6e4d0f6c-caf2-11eb-a072-d3211de483d0/cephadm.30cb78bdbbafb384af862e1c2292b944f15942b586128e91262b43e91e11ae90", line 4682, in with_units_to_int
   return int(float(v) * mult)
ValueError: could not convert string to float: '--'
2021-06-12T08:50:10.295584+0000 mgr.st01.bilatz (mgr.41549) 1864 : cephadm [INF] Deploying daemon osd.4 on st02

покажи ямлик осд

Пока ясно только,что на одной ноде больше 26 osd я создать не могу, зависате без ошибок

а если перейти на кирилицу? (шутка)

видно не умеет понимать переход от sdz к sdaa

Я по одному добавлял, sdaa с другого хоста без проблем

А можно добавить osd  в обход оркестратора?

Никогда не пользовался оркестраторами.

А вообще кто пользуется оркестратором, просто он от обновления к обновлению подкидывает сюрпризы...

Мало кто пока. Бетатестеры

Меня вот вообще не тянет с ним якшаться

Rook ?

Rook это вообще говно из жопы

Я про этот, cephadm

Что он чуть менее говно, но его пока тоже не особо народ юзает