Size: a a a

Ceph — русскоговорящее сообщество

2020 May 11

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Виталий На Заборе
Если у тебя не установлено cache=writeback, то я сильно подозреваю, что это все именно он
при некоторых вариантах нагрузки, writeback еще и уменьшает скорость и повышает latency
источник

И

Искандар in Ceph — русскоговорящее сообщество
Виталий На Заборе
Если у тебя не установлено cache=writeback, то я сильно подозреваю, что это все именно он
Сейчас no cache
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Irek Fasikhov
при некоторых вариантах нагрузки, writeback еще и уменьшает скорость и повышает latency
при линейных с большим блоком
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
ибо кэш размером мелкий, но алгоритм "вытеснения" в любом случае работает.
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Искандар
По моим расчетам если рейд 6, то получается сэкономлю 1.2 Тб.
вам ceph не нужен, раз вы экономите на паре ТБ
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Искандар
Кстати, вопрос по поводу raid массивов. Насколько правильно если я соберу диски на raid6 и потом в ceph? Так у меня объем увеличивается на 1.2 Тб. Может кто-то уже сталкивался?
Ну рейд 5 - 6 - это write hole, которого в цефе нет... на ребилд попадать неприятно. Управлять геморней. За батарейками следить, если не конденсатор. Могут быть нюансы с корректностью flush-ей кэша и клаудмаус по итогу. А EC просаживает производительность. Даже и сам рейд по идее тоже просаживает, но меньше. Но рейд под цефом пахнет геморроем все-таки... у меня EC 2+1 ))
источник

И

Искандар in Ceph — русскоговорящее сообщество
Irek Fasikhov
вам ceph не нужен, раз вы экономите на паре ТБ
ceph мне нужен в перспективе)
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Irek Fasikhov
при некоторых вариантах нагрузки, writeback еще и уменьшает скорость и повышает latency
Да я знаю, у меня выключен. Он для говнософта полезен
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Искандар
ceph мне нужен в перспективе)
тогда забудьте про экономию в паре ТБ в будущем )
источник

Н

Никитяо in Ceph — русскоговорящее сообщество
Александр
raid с ceph использовать категорически нельзя, если конечно вы не мазохист
+
источник

И

Искандар in Ceph — русскоговорящее сообщество
Виталий На Заборе
Ну рейд 5 - 6 - это write hole, которого в цефе нет... на ребилд попадать неприятно. Управлять геморней. За батарейками следить, если не конденсатор. Могут быть нюансы с корректностью flush-ей кэша и клаудмаус по итогу. А EC просаживает производительность. Даже и сам рейд по идее тоже просаживает, но меньше. Но рейд под цефом пахнет геморроем все-таки... у меня EC 2+1 ))
Благодарю за подробный ответ!
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Виталий На Заборе
Ну рейд 5 - 6 - это write hole, которого в цефе нет... на ребилд попадать неприятно. Управлять геморней. За батарейками следить, если не конденсатор. Могут быть нюансы с корректностью flush-ей кэша и клаудмаус по итогу. А EC просаживает производительность. Даже и сам рейд по идее тоже просаживает, но меньше. Но рейд под цефом пахнет геморроем все-таки... у меня EC 2+1 ))
а калудмаус тут причем? )
источник

А

Александр in Ceph — русскоговорящее сообщество
Irek Fasikhov
а калудмаус тут причем? )
это уже нарицательное здесь
источник

И

Искандар in Ceph — русскоговорящее сообщество
Irek Fasikhov
тогда забудьте про экономию в паре ТБ в будущем )
Понял)
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Производительность рандомной записи, конкретно. Вот ее, которая и так в жопе, EC опускает ниже плинтуса
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Но линейная в общем норм
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Точнее параллельно опять же, в целом норм, но латенси хуже раза в 2-4
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
EC только для radosgw рекомендую, для rbd все же replicate куда приятнее )
источник

И

Искандар in Ceph — русскоговорящее сообщество
Виталий На Заборе
Если у тебя не установлено cache=writeback, то я сильно подозреваю, что это все именно он
Включил cache=writeback, сейчас выложу скрин теста
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
я думаю и чтение будет в раз 5 ниже. У вас кэш в памяти
источник