ВН
Size: a a a
2020 September 15
ВН
вот почему короче кафка тормозит! потому что DDR!
AT
:DDDDD
ВН
p
Nikolay
у меня кафка притормаживает почему-то при опреденных настройках. теперь понятно , что на запись в пэйдж кэш она не может тормозить. что -то другое.спасибо
программы не пишут в page cache, как и не читают из него.
N
программы не пишут в page cache, как и не читают из него.
ну это я упрощаю, конечно она вызывает api системы подкапотом,, но как она это делает без O_DIRECT и O_SYNC условно говоря
p
всё-таки VM до добра людей не доводят
N
но в конечном итоге там посикс )
ВН
писать без O_DIRECT и без aio это вообще конечно отстой
N
ну в кафке концепция другая. она durability делает через фоловеров делает. она даже flush делает по времени/количеколичеству сообщений. и java только с 9ки может напрямую на диски.
2020 September 16
p
Nikolay
ну в кафке концепция другая. она durability делает через фоловеров делает. она даже flush делает по времени/количеколичеству сообщений. и java только с 9ки может напрямую на диски.
напрямую на диски может только spdk ;)
N
Тогда ссккажите. Вот говорил недавно с людьми из postgresql, которые вызывают доверие. они говорят, что ПГ даже при o_direct and o_sycn делает вызов fsync. зачем?
ВН
Nikolay
ну в кафке концепция другая. она durability делает через фоловеров делает. она даже flush делает по времени/количеколичеству сообщений. и java только с 9ки может напрямую на диски.
вот понапишут всяких кафок на жабе
ВН
Nikolay
Тогда ссккажите. Вот говорил недавно с людьми из postgresql, которые вызывают доверие. они говорят, что ПГ даже при o_direct and o_sycn делает вызов fsync. зачем?
хороший вопрос
i
вот понапишут всяких кафок на жабе
И стримят друг друга в кучу
ВН
мне тоже стало интересно, зачем
N
ВН
Nikolay
это-то нормально, O_DIRECT не гарантирует пробоя кэша
ВН
но O_SYNC обычно вроде гарантирует... хотя, кстати, у меня на ноутбуке вот прям на NVMe-шке консьюмерской fio -sync=1 выдаёт заоблачную цифру