Size: a a a

SDS и Кластерные FS

2020 October 02

ВН

Виталий На Заборе... in SDS и Кластерные FS
А 2 вообще без кэша?
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Или что
источник

N

Nikolay Kulikov in SDS и Кластерные FS
Виталий На Заборе
Я что то не понимаю этот график, где тут глубина очереди?
Тест проводился 12ВМ, 10vmdk, 4K, 100% Random, 100% Read и 100% Write. тредов несколько (лень искать сколько), пробитие кэша есть, тест шел через указание IOPS Limit в FIO. Каждая точка - результат прогона с 30 минутным прогревом и час теста с заданным IOPS. В таблице фиксировалась полученная latency. Зеленые - зеркало. Синий - Erasure Coding + SE. 4 хоста на AMD + 10GbE сеть.
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Nikolay Kulikov
Тест проводился 12ВМ, 10vmdk, 4K, 100% Random, 100% Read и 100% Write. тредов несколько (лень искать сколько), пробитие кэша есть, тест шел через указание IOPS Limit в FIO. Каждая точка - результат прогона с 30 минутным прогревом и час теста с заданным IOPS. В таблице фиксировалась полученная latency. Зеленые - зеркало. Синий - Erasure Coding + SE. 4 хоста на AMD + 10GbE сеть.
Ну понятно... ну в принципе можно предположить, что где-то на графике есть минимальная задержка, да... хотя конечно T1Q1 коррэктней
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Nikolay Kulikov
Тест проводился 12ВМ, 10vmdk, 4K, 100% Random, 100% Read и 100% Write. тредов несколько (лень искать сколько), пробитие кэша есть, тест шел через указание IOPS Limit в FIO. Каждая точка - результат прогона с 30 минутным прогревом и час теста с заданным IOPS. В таблице фиксировалась полученная latency. Зеленые - зеркало. Синий - Erasure Coding + SE. 4 хоста на AMD + 10GbE сеть.
Зеленый/синий наверное наоборот, а то получается странно, что EC быстрее зеркала
источник

N

Nikolay Kulikov in SDS и Кластерные FS
Виталий На Заборе
Зеленый/синий наверное наоборот, а то получается странно, что EC быстрее зеркала
Да, наоборот
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Nikolay Kulikov
Тест проводился 12ВМ, 10vmdk, 4K, 100% Random, 100% Read и 100% Write. тредов несколько (лень искать сколько), пробитие кэша есть, тест шел через указание IOPS Limit в FIO. Каждая точка - результат прогона с 30 минутным прогревом и час теста с заданным IOPS. В таблице фиксировалась полученная latency. Зеленые - зеркало. Синий - Erasure Coding + SE. 4 хоста на AMD + 10GbE сеть.
Ну то есть если верить графику, то лучшая латенси ~0.3 чтение и ~0.5 запись. Not bad, vsan, но витастор ты не догнал
источник

N

Nikolay Kulikov in SDS и Кластерные FS
Виталий На Заборе
Ну то есть если верить графику, то лучшая латенси ~0.3 чтение и ~0.5 запись. Not bad, vsan, но витастор ты не догнал
вот поэтому и результаты по сравнению требуют апрува. Там 100500 факторов. Начиная от того, где мы измеряем задержку, до того в каком состоянии и с каким настройками все работает. Плюс тесты старые достаточно - им где-то года-два.
источник

AK

Artemy Kapitula in SDS и Кластерные FS
С цефа в таком конфиге на реплике 3 было бы порядка 17K IOPS с латенси ~2ms на запись и около 50 k IOPS на чтение с латенси ~1ms
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Nikolay Kulikov
вот поэтому и результаты по сравнению требуют апрува. Там 100500 факторов. Начиная от того, где мы измеряем задержку, до того в каком состоянии и с каким настройками все работает. Плюс тесты старые достаточно - им где-то года-два.
Это все пофиг
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Ну т.е в сравнимой конфигурации моя поделка будет быстрее, это точно
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Даже вообще без nvmeшек под кэш
источник

S

Stas in SDS и Кластерные FS
@KulikovNikolay

Какой коэффициент дедупа выходит?
источник

AK

Artemy Kapitula in SDS и Кластерные FS
С учетом того что в табличке латенси порядка >=5ms везде - всё не так плохо
источник

N

Nikolay Kulikov in SDS и Кластерные FS
Stas
@KulikovNikolay

Какой коэффициент дедупа выходит?
эээ... от данных зависит же
источник

S

Stas in SDS и Кластерные FS
ну на рутах обычных
источник

SU

Sergey Usov in SDS и Кластерные FS
/stat@combot
источник

C

Combot in SDS и Кластерные FS
Total messages: 26658
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Artemy Kapitula
С учетом того что в табличке латенси порядка >=5ms везде - всё не так плохо
Латенси в насыщенном режиме говорит мало о чем по факту
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Т.к сделай очередь 40000 и возрастет латенси до небес
источник