Size: a a a

SDS и Кластерные FS

2021 July 07

ВН

Виталий На Заборе... in SDS и Кластерные FS
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
T1HA
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Ну и действительно по уму делать протокол с end-to-end т.к. в Ceph например не совсем он вроде
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Ну и ещё раз повторюсь - я реально плохо верю, что внутренние чексуммы в диске слабее, чем CRC
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
То есть я не отрицаю что паранойя это хорошо
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
Но не уверен, что от неё прям реально большой профит
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
На нормальных SSD-шках по крайней мере
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
А не на ноунейме
источник

GM

George Melikov in SDS и Кластерные FS
ну вот тебе бенчи zfs'а на старте (ryzen 3950x + 2x3600mhz dual channel RAM) для fletcher4 как пример
$ cat /proc/spl/kstat/zfs/fletcher_4_bench
0 0 0x01 -1 0 25313797900 48794873954190
implementation   native         byteswap
scalar           8169864707     5789360479
superscalar      8590714654     6913547499
superscalar4     11321909429    8582051097
sse2             13541674328    8491932843
ssse3            13587641603    15755369025
avx2             22201539315    22053514033
fastest          avx2           avx2

т.е. avx2 на потоке от raw пропускной способности ОЗУ да отличается. Да, огромного скачка не даст, но не надейся на бесплатность
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
это типа 13.5 гигабайт в секунду на SSE?
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
то есть типа 13.5 мегабайт в микросекунду? ))
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
если да - то это типа даже если взять в 1000 раз более медленную реализацию, то всё равно латенси на 4 кб врайтах будет незаметна вообще
источник

GM

George Melikov in SDS и Кластерные FS
да, для конкретной реализации на конкретном железе
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
ну иными словами можно не париться, ничего с латенси не случится
источник

GM

George Melikov in SDS и Кластерные FS
случится, вопрос насколько
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
на 0.1%
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
там не знаю, было 90 микросекунд, станет 91
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
повторюсь - естественно если не будет сделано всё остальное через жопу
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
если не будет 10 дополнительных слоёв rocksdb и т.п.
источник

GM

George Melikov in SDS и Кластерные FS
думаю больше, чем меньше блок (а ты вроде про 4к говоришь) тем больнее
источник