Size: a a a

Ceph — русскоговорящее сообщество

2020 December 04

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Доктор, я буду жить? - А смысл?
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
Павел Савин
Может кто-то встречался с таким поведением.. В результате получаю средний iops около 60к но задержки более 5 секунд.
случаем не файлстор? -)
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
Dmitry Polyakov
случаем не файлстор? -)
это BCACHE - hdd + ssd без цефа, прям на /dev/bcache0
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Я имею в виду - будет всё равно куча оверхеда, какой смысл
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
Павел Савин
это BCACHE - hdd + ssd без цефа, прям на /dev/bcache0
а, не заметил
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
writeback_running off ?
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
Павел Савин
с чем это может быть связано? крутил writeback_rate - не влияет. Отключение кеша на ssd так же не влияет.
^^
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
Dmitry Polyakov
а, не заметил
если например, -fsync=3000 сделать, выдает 30K - iops, и не "подвисает".
Уже все настройки bcache "крутил", ситуация не меняется. Стабильно через 15-20 секунд i/o "подвисает"
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
writeback включен конечно, откуда тогда взяться 90к iOPS на hdd с direct=1
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
writeback_running
 If off, writeback of dirty data will not take place at all. Dirty data will
 still be added to the cache until it is mostly full; only meant for
 benchmarking. Defaults to on.
- отключает всякие операции на вб типа троттлинга при достижении типа writeback_percent
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
если я правильно понял
источник

DP

Dmitry Polyakov in Ceph — русскоговорящее сообщество
это можно отключить и посмотреть как влияет или нет вб
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
аа, понял.
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
не, не влияет..
Jobs: 1 (f=1): [w(1)][50.0%][r=0KiB/s,w=0KiB/s][r=0,w=0 IOPS][eta 00m:30s]
Jobs: 1 (f=1): [w(1)][81.7%][r=0KiB/s,w=312MiB/s][r=0,w=79.8k IOPS][eta 00m:11s]
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Павел Савин
не, не влияет..
Jobs: 1 (f=1): [w(1)][50.0%][r=0KiB/s,w=0KiB/s][r=0,w=0 IOPS][eta 00m:30s]
Jobs: 1 (f=1): [w(1)][81.7%][r=0KiB/s,w=312MiB/s][r=0,w=79.8k IOPS][eta 00m:11s]
Возможно, стоит покрутить эти, P/I
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Но там не совсем тривиально их крутить
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
У него пропорционально-интегральный регулятор встроен
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
%)
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Он же видимо у тебя сначала много в себя принимает а потом начинаёт жёстко тупить из-за сброса
источник

ПС

Павел Савин... in Ceph — русскоговорящее сообщество
ну кеш не переполняется, делал так же writeback_percent=100 -  ничего не дает.
источник