много что дает.

IPoIB тормозной, RDMA уменьшает latency раз в 10

а у тебя там что - SSD? можешь пробенчить?

40к иопс

вот так пробенчить можешь?
fio -ioengine=rbd -direct=1 -name=test -bs=4k -iodepth=1 -rw=randwrite -pool=rpool_hdd -runtime=60 -rbdname=testimg

на латенси

из виртуалки на rbd с ext4

ну 40к иопс это iodepth=много явно

а вот iodepth=1 - сколько будет?

40k из одной виртуалки тоже хорошо, у меня только ~20-25k получается (на 10G)

iodepth=16 что ли ставил. Все упирается в проц на хостах. Цеф жрет его хорошо

latency в виртуалке менять я думаю смысла нет никакого, с виртуализацией и virtio прослойкой

ну померь с хостов, хоспаде

а давайте обсудим вычисление оптимального значения max_bytes_for_level_base. на данный момент мне кажется лптимальным его ставить из ряда размер_свободного_места_на_db / (21,211,2111)

Ceph Crimson/OSD 2020-06-24 meeting recording is now available https://www.youtube.com/watch?v=Eb9v9DWaWOc

Ключевые улучшения MariaDB 10.5:
Добавлен движок хранения S3, позволяющий размещать
таблицы MariaDB в Amazon S3 или любом другом публичном или
приватном облачном хранилище, поддерживающем API S3.
Поддерживается размещение в S3 как обычных, так и
секционированных (партицированных) таблиц. При размещении
в облаке секционированных таблиц в S3 они могут напрямую
использоваться в том числе с другого сервера, имеющего
доступ к хранилищу S3.

Стабильный выпуск СУБД MariaDB 10.5 https://opennet.ru/53225/

неожиданно)

ключевую деталь не сказали: таблицы в s3 только для чтения