Size: a a a

Ceph — русскоговорящее сообщество

2021 February 21

МК

Марк ☢️ Коренберг... in Ceph — русскоговорящее сообщество
Valery Magey
скрабы выключены, ничего не ребалансица
иопсов ноль?
Обычно всем насрать. Почему ты спрашиваешь ?
источник

VM

Valery Magey in Ceph — русскоговорящее сообщество
Марк ☢️ Коренберг
Обычно всем насрать. Почему ты спрашиваешь ?
есть два бомж-кластера (HDD)
на одном все ок (пока)
на втором дикая латентность (80-300)
грешил на lvm, bonding (ab)
выносил WAL/DB на SSD - без изменений
и собственно к чему вопрос :  мне кажется что суммарное количество иопсов от VPS в разы меньше чем те что я вижу в iostat на OSD - соответственно возникла мысли что CEPH чтото сам себе маслает
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Valery Magey
есть два бомж-кластера (HDD)
на одном все ок (пока)
на втором дикая латентность (80-300)
грешил на lvm, bonding (ab)
выносил WAL/DB на SSD - без изменений
и собственно к чему вопрос :  мне кажется что суммарное количество иопсов от VPS в разы меньше чем те что я вижу в iostat на OSD - соответственно возникла мысли что CEPH чтото сам себе маслает
ох. это write amplification называется
источник

МК

Марк ☢️ Коренберг... in Ceph — русскоговорящее сообщество
Valery Magey
есть два бомж-кластера (HDD)
на одном все ок (пока)
на втором дикая латентность (80-300)
грешил на lvm, bonding (ab)
выносил WAL/DB на SSD - без изменений
и собственно к чему вопрос :  мне кажется что суммарное количество иопсов от VPS в разы меньше чем те что я вижу в iostat на OSD - соответственно возникла мысли что CEPH чтото сам себе маслает
Естественно!
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
конечно их больше
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Valery Magey
есть два бомж-кластера (HDD)
на одном все ок (пока)
на втором дикая латентность (80-300)
грешил на lvm, bonding (ab)
выносил WAL/DB на SSD - без изменений
и собственно к чему вопрос :  мне кажется что суммарное количество иопсов от VPS в разы меньше чем те что я вижу в iostat на OSD - соответственно возникла мысли что CEPH чтото сам себе маслает
у цефа WA примерно 5
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
на мелких операциях
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
то есть на 1 запись твоей виртуалкой цеф делает ПЯТЬ записей
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
без учёта реплик
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
плюс три реплики - это уже ПЯТНАДЦАТЬ записей
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
на 1
источник

VM

Valery Magey in Ceph — русскоговорящее сообщество
либо все таки есть  какойто паршивый впс с высокой утилизацией диска, но странно что я его еще не вычислил
источник

МК

Марк ☢️ Коренберг... in Ceph — русскоговорящее сообщество
Valery Magey
либо все таки есть  какойто паршивый впс с высокой утилизацией диска, но странно что я его еще не вычислил
Это ты ещё на ребаланс на хдд не попал
источник

МК

Марк ☢️ Коренберг... in Ceph — русскоговорящее сообщество
Лул
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
а если у тебя скажем RGW то там ещё всякие обновления индексов и он по факту при заливке объектов делает на каждый объект операций штук 5
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
там правда в основном мета, но всё равно, WA 10*3 легко
источник

VM

Valery Magey in Ceph — русскоговорящее сообщество
Марк ☢️ Коренберг
Это ты ещё на ребаланс на хдд не попал
та ну как не попадал
я ж играюсь на живую (правда ноаут+норебаланс)
пересоздаю осд на ночь
утром смотрю результат ))
источник

МК

Марк ☢️ Коренберг... in Ceph — русскоговорящее сообщество
Valery Magey
та ну как не попадал
я ж играюсь на живую (правда ноаут+норебаланс)
пересоздаю осд на ночь
утром смотрю результат ))
А сколько суммарный обьем всех осд у тя ?
источник

VM

Valery Magey in Ceph — русскоговорящее сообщество
источник

VM

Valery Magey in Ceph — русскоговорящее сообщество
источник