NS
так всеж в памяти, не?
Ну 5Tb в 32 Гб никак не впихнуть так что не все. Очень система чувствительна к latency
Size: a a a
2019 March 07
NS
Заметили даже, что если это дело прокинуть через iscsi - добавив еще latency -становится сильно хуже, чем если просто прокинуть диск через iscsi.
NS
А sequence write не тестили?
seq write:
54952.19 iops
seq read:
101987.28 iops
54952.19 iops
seq read:
101987.28 iops
k
Ну 5Tb в 32 Гб никак не впихнуть так что не все. Очень система чувствительна к latency
хм, может я ошибаюсь, но я полагаю что там в памяти должна быть хэш таблица и при каждой операции записи вычисляются хэши, если хэш совпадает с одним из тех что в таблице, значит данные считаются записанными если нет, то записываются, во всяком случае zfs так работает
NS
и 78282.26 iops где то выдавало на seq ro и rw на чистом raid-0 из 4х дисков
k
и 78282.26 iops где то выдавало на seq ro и rw на чистом raid-0 из 4х дисков
Хм, похоже мой коллега ошибся и он намерял кэши
NS
хм, может я ошибаюсь, но я полагаю что там в памяти должна быть хэш таблица и при каждой операции записи вычисляются хэши, если хэш совпадает с одним из тех что в таблице, значит данные считаются записанными если нет, то записываются, во всяком случае zfs так работает
Ну да, как то так оно и работает, только записать это дело ему все равно куда то надо, в данном случае будет запись в sparce-инекс, а он в том же массиве
k
отправил перетестить с oflag=sync
NS
Хм, похоже мой коллега ошибся и он намерял кэши
У меня все тесты с sync и 4k блоки
k
ок, позже отпишу
NS
отправил перетестить с oflag=sync
Да, скорее всего где то там мерлись кэши
k
кстати тут на мыле доклад недавно был классный, про кэши
AZ
Про кэш могу сказать в разрезе ceph
AZ
Отключение всех кэшей даже на дисках повышает производительность на 20-30%
k
кстати тут на мыле доклад недавно был классный, про кэши
ВН
Отключение всех кэшей даже на дисках повышает производительность на 20-30%
?
NS
возможно речь о планировщиках, присоединюсь к вопросу.
ВН
Меня заинтересовало почему 20-30% и про ссд или хдд речь. Так то я наблюдал сам забавные вещи, у меня на ссд+хдд кластере иопсы с 200 до 600 поднялись при hdparm -W 0 всем hdd
ВН
Но там этому есть объяснение