Size: a a a

Ceph — русскоговорящее сообщество

2021 September 11

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество
Прикрльно, не видел
источник
2021 September 12

J

John Roe in Ceph — русскоговорящее сообщество
источник
2021 September 14

ВМ

Владимир Марченко... in Ceph — русскоговорящее сообщество
Всем привет.
Что можете сказать о использовании write-back кэша для OSD, при условии что каждый диск отдан в ОС как RAID из одного диска?
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Wb кэша контроллера?
источник

ВМ

Владимир Марченко... in Ceph — русскоговорящее сообщество
да
источник

ВМ

Владимир Марченко... in Ceph — русскоговорящее сообщество
Вычитал вот такое только что у редхата
Red Hat recommends that each hard drive be exported separately from the RAIDcontroller as a single volume with write-back caching enabled.
источник

AN

Andrey Nemysskiy in Ceph — русскоговорящее сообщество
В CEPH массово используется "fsync" по поводу и без, что сводит на нет всю радость от кэширования на стороне контроллера.
Я перевел свои RAID-контроллеры на режим HBA.

Write-back на стороне контроллера был бы хорош на СУБД или файловой помойке. А так как работает CEPH радости от аппаратного кэша практически никакой.
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Мм, почему?
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Ну Ирек @irekfasikhov говорил что он так делал, его устраивало. Обычно не рекомендуют, но исходя не из производительности, а из отказоустойчивости, типа, диск в другой сервер не переставишь там и всё такое, и что будет если батарейка у контроллера сдохнет и т.п...
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Брать нормальный аккум и все будет норм
источник

KA

Konstantin Aristov in Ceph — русскоговорящее сообщество
Никогда такого не было, и вот опять. А статья точно свежая? А то я такие бест практис в 2012-м году применительно к хранилке на 50 террабайт абсолютно ненужных данных под FreeBSD+ZFS видел))
источник

AN

Andrey Nemysskiy in Ceph — русскоговорящее сообщество
Это называется "заботливо раскладывать для самого себя грабли".
Наступишь обязательно, это только вопрос времени.

Лично у меня (95% дисковой емкости использовалось под RBD, т.е. под диски виртуалок), никакой радости от экспортирования одиночных дисков в режиме RAID-0 и включения Write back я не увидел. Более того, есть гемор. Нельзя получить состояние SMART.  Нельзя поиграться настройками дискового планировщика, а бывает что это надо.

Как по мне, "на фига козе баян" ? Юзайте диски в режиме HBA и уберите лишние "улучшатели". Ибо они могут оказывать медвежьи услуги, а повлиять на их работу, когда вы залили террабайты данных уже будет сложно, если вообще возможно.
источник

VC

Victor Chaplinsky in Ceph — русскоговорящее сообщество
данные S.M.A.R.T. получить можно, но чуть нестандартным способом
источник

AN

Andrey Nemysskiy in Ceph — русскоговорящее сообщество
Не, ну если захотеть, можно и на луну улететь. И ходить боком и даже задом.
Вопрос: На фига козе баян?
источник

VC

Victor Chaplinsky in Ceph — русскоговорящее сообщество
ну и кэш контроллера работает. с планировщикам - да, пролёт
с HDD он WB даёт снижение iowait по сравннению с WT
источник

VC

Victor Chaplinsky in Ceph — русскоговорящее сообщество
а вот если из SSD создавать raid0 из одного диска, то по крайней мере контроллер LSI не обеспечивает необходимые IOPS.
источник

AN

Andrey Nemysskiy in Ceph — русскоговорящее сообщество
Какая от него радость? Есть реальные примеры радости? Я не видел.
Если вам так критично увидеть радость в менее 1-2%, то это не радость. Это статистическая погрешность

Владелец может делать что хочет. Я просто поделился личным опытом
источник

VC

Victor Chaplinsky in Ceph — русскоговорящее сообщество
вопрос был в том, стоит включать WB или нет, а не использовать контроллер в режиме RAID или нет
источник

VC

Victor Chaplinsky in Ceph — русскоговорящее сообщество
может нет возможности перевести контроллер в режим HBA или отдать диски, как JBOD
источник

ВМ

Владимир Марченко... in Ceph — русскоговорящее сообщество
Цель была именно повысить быстродействие, сейчас в HBA режиме
источник