Вообщем я насколько понял старый alpine vrouter связан был со старой реализацией кластера (Corosync + Pacemaker). А после raft надобность в нем отпала что и видно по последней версии Opennebula 5.2.
А чем raft плох?

etcd тоже raft использует. Дело не в самом алгоритме, а его реализации в опеннебула?

именно

Alpine роутер никак с pacemaker не связан

Alpine роутер - это как правило клиентская виртуалка, а Pacemaker нужен для организации отказоустойчивости самой опеннебулы

В lxc raw через loop, qcow2 через nbd, а ceph напрямую.
Мы проводили тестирование скорости ФС.
Установка пакетов salt (apt-get install):
* native lxc на железе: real 45.12 user 12.79 sys 9.36
* one виртуалка qcow2: real 58.29 user 10.23 sys 3.06
* native lxc в виртуалке qcow2: real 100.70 user 21.70 sys 22.50
* lxc через one в виртуалке qcow2: real 393.55 user 9.81 sys 3.28

"lxd через one в виртуалке" - это примерно такой костыль:
* делаешь виртуалку в one
* сетапишь её, как хост в one
* в этом "хосте" делаешь lxc в one

Конечно, можно было тюнить все и выставлять правильные драйверы, форматы и т.д.
Но это был дополнительный довод отказаться от lxc в one.

Лучше бы кубернетес сразу

Так и что из этого результат LXC на loop?

qemu-nbd сам по себе довольно странная штука, а я полагаю что там именно он)

* lxc через one в виртуалке qcow2: real 393.55 user 9.81 sys 3.28

Но это не на железе, да.
Кстати, с loop есть ограничение - не больше 256 устройств на машине.
А у нас кейс, где может быть под 1000.

Хех тогда спрошу ещё раз: а почему не Kubernetes?

Всё таки по 1000 контейнеров на хост кейс довольно нестандартный, думаю что куб с ним справится лучше чем опеннебула

Это для разработчиков и тестеров, мне сказали, что им удобнее виртуалки или контейнеры, чем докеры.
Ну там, запускаешь, перезапускаешь, смотришь в логи, правишь код, доустанавливаешь пакеты.
Но в будущем может будет и куб.

у куба помоему вообще рекомендация не больше 100 на хост

Там это легко настраивается, но в основном да, большое количество маленьких нод (или виртуалок) всегда лучше чем мало но больших

Мне кажется, это ограничение ещё и для того, чтобы всем хватало pid, uid, gid и вот этого всего.

все-таки виртуалки тут более изолированные, им только cpu и оперативку подавай,  а снаружи это один процесс qemu

а можно из имадж-датастора имадж скачать средствами веб-интерфейса?

Не, для этого маркетплейс был придуман

можно поднять свой маркетплейс. там можно