никто не мешает то же с цефом сделать
только не надо по 100 дисков в ноду пихать
и кстати вот:
https://rook.io/

но проект совсем не продакшен-реди пока еще

На канале ceph_ru иногда можно было почитать комментарии в сторону rook. Теперь они оформились в виде статьи :)
Имхо, чтобы ставить ceph в k8s, нужно иметь хороший опыт и в том и в другом.
Но судя по отзывам тех, кто имеет хороший опыт в ceph, им уже не нужен для этого k8s.

LVM

virsh # domblklist one-136
Назначение Источник
------------------------------------------------
sda        /var/lib/one//datastores/113/136/disk.0
hda        /var/lib/one//datastores/113/136/disk.2
hdb        /var/lib/one//datastores/113/136/disk.1

virsh # snapshot-create-as --domain one-136 guest-state1   --diskspec sda,file=/var/lib/one/datastores/113/136/sda --diskspec hdb,file=/var/lib/one/datastores/113/136/hdb --diskspec hda,file=/var/lib/one/datastores/113/136/hda --quiesce --disk-only --atomic
ошибка: internal error: unable to execute QEMU command 'transaction': Could not create file: Permission denied



# tail /var/log/messages
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.590+0000: 164968: error : qemuMonitorJSONCheckError:396 : internal error: unable to execute QEMU command 'transaction': Could not create file: Permission denied
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.596+0000: 164968: error : virCgroupDenyDevicePath:3096 : Path '/var/lib/one/datastores/113/136/sda' is not accessible: No such file or directory
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.596+0000: 164968: warning : qemuDomainDiskChainElementRevoke:8594 : Failed to teardown cgroup for disk path /var/lib/one/datastores/113/136/sda
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.598+0000: 164968: error : virCgroupDenyDevicePath:3096 : Path '/var/lib/one/datastores/113/136/hda' is not accessible: No such file or directory
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.598+0000: 164968: warning : qemuDomainDiskChainElementRevoke:8594 : Failed to teardown cgroup for disk path /var/lib/one/datastores/113/136/hda
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.600+0000: 164968: error : virCgroupDenyDevicePath:3096 : Path '/var/lib/one/datastores/113/136/hdb' is not accessible: No such file or directory
May 20 22:32:32 rnimu-kvm-10 libvirtd: 2019-05-20 19:32:32.600+0000: 164968: warning : qemuDomainDiskChainElementRevoke:8594 : Failed to teardown cgroup for disk path /var/lib/one/datastores/113/136/hdb

я требую невозможного?

или мне сначала нужно создать целевые диски?

прикольно - если их просто создать, то они сотрутся )

суть ошибки от этого не изменится. от местоположения снапшота ошибка тоже не меняется

Сделай touch на их месте

Делал

mysql -u oneadmin -p -e 'DELETE FROM marketplaceapp_pool' opennebula_db
for SQLite3: sqlite3 /var/lib/one/one.db 'DELETE FROM marketplaceapp_pool'

спасибо, помогло

нет идей? :)

ты это бэкапы изобретаешь?

@UnixGuru у меня работает:

# touch /var/lib/one/datastores/107/132/disk.0.state.0
# chown oneadmin: /var/lib/one/datastores/107/132/disk.0.state.0
# virsh snapshot-create-as --domain one-132 --no-metadata --disk-only --atomic --diskspec vda,file=/var/lib/one/datastores/107/132/disk.0.state.0
Domain snapshot 1558539846 created

да, все верно... я не догадался созданным файлам еще и oneadmin назначить, спасибо

ну да, велик )

не хочу снапшотами лвм пользоваться

хочу делать копии и класть их в IMAGE DS + формировать шаблоны.. чтобы оператор мог рестор тачки сделать, если надо из вебморды

А если умрет хранилище?