It is advisable to run an odd-number of monitors but not mandatory. An odd-number of monitors has a higher resiliency to failures than an even-number of monitors. For instance, on a 2 monitor deployment, no failures can be tolerated in order to maintain a quorum; with 3 monitors, one failure can be tolerated; in a 4 monitor deployment, one failure can be tolerated; with 5 monitors, two failures can be tolerated. This is why an odd-number is advisable. Summarizing, Ceph needs a majority of monitors to be running (and able to communicate with each other), but that majority can be achieved using a single monitor, or 2 out of 2 monitors, 2 out of 3, 3 out of 4, etc.

Это верно. Но я пытался понять почему внедренец нам тут навертел один монитор и выкинул его из кворума.

сам монитор здоров по общим признакам, но тут его убрали скорее всего чтоб конфигу не трогать и все

у нас есть 4 монитора, 1 из них не в кворуме, но в ceph mgr

почему выкинули 4й монитор из кворума? я не знаю

Как можно выкинуть один монитор из кворума?

может и не взлететь - в смысле быть слишком медленным. в частности нужно понять где у тебя будет mds и мета, вообще в cephfs её надо на ссд почти всегда

если разместишь mds удалённо - будет медленное обращение к mds, если разместишь локально а мету удалённо - будет медленная работа с метой, если всё локально - то вроде как целостность cephfs зависит от локальной стороны, если сделаешь для меты смесь из локальных и удалённых ссд - будет кросс дц репликация, тоже хз что будет. но может и нормально всё будет