ПС
Нужно-ли стремиться чтобы pg=pgp, с этим вообще не ясно из документации.?
Size: a a a
2020 December 21
MS
Pg=pgp должно быть, на это даже warn есть
MS
В доках ещё описано, что автоскейлер не для продакшен среды т.к. Увеличение пг очень ресурсоемкая задача для кластера и количество pg лучше выставлять заранее
ВН
Весь вопрос, нах они его сделали тогда
ВН
Если сами в доках так пишут
ВН
всем привет.
Почитал тут переписку про увеличение/уменьшение pg и pgp..
Возникли вопросы.
1) по документации кол-во pg не зависит от размера диска(osd), а зависить от %заполнения и кол-ва osd. -
К примеру, имеется пул с тройной репликацией на 18 osd размером 1TB (использование 100%) - по калькулятору получается 512 PG
И так же пул, на больших дисках , те же 18 osd размер только 10TB(использование 100%) - по калькулятору опять выходит 512 PG
ПРи этом размер PG будет в 10раз больше, соответственно ребаланс и репликация будет большими "кусками"..
Это нормально, я всё правильно понял?
2) Стоит-ли использовать pg autoscaler, который включается "по умолчанию" ?
Почитал тут переписку про увеличение/уменьшение pg и pgp..
Возникли вопросы.
1) по документации кол-во pg не зависит от размера диска(osd), а зависить от %заполнения и кол-ва osd. -
К примеру, имеется пул с тройной репликацией на 18 osd размером 1TB (использование 100%) - по калькулятору получается 512 PG
И так же пул, на больших дисках , те же 18 osd размер только 10TB(использование 100%) - по калькулятору опять выходит 512 PG
ПРи этом размер PG будет в 10раз больше, соответственно ребаланс и репликация будет большими "кусками"..
Это нормально, я всё правильно понял?
2) Стоит-ли использовать pg autoscaler, который включается "по умолчанию" ?
А 1) да, ну вот так уж устроен цеф. Хотя никто точно не понимает что будет если будет не 100 а там 200 пг на осд
AK
Ничего плохого
AK
Точнее, ничего слишком плохого
AK
Так, мелкие несущественные эффекты
AK
Вот если не 200 а 2000 - это уже да
ПС
В доках ещё описано, что автоскейлер не для продакшен среды т.к. Увеличение пг очень ресурсоемкая задача для кластера и количество pg лучше выставлять заранее
ну в latest документации в разделе placement groups, я такого не увидел. Может это раньше было...
ПС
Всем спасибо за ответы.
VO
а насколько хуево в цифрах будет rbd over hdd? а rbd over ec hdd?
Am
Очевидно же что хуевато и чуть хуевее
VO
я хотел бы примерных цифр все же. ну там латенси, иопсов.
ВН
а насколько хуево в цифрах будет rbd over hdd? а rbd over ec hdd?
30 иопс с глубиной очереди 1, если повезет то 60. Если метаданные не влезают в память то меньше. Если хдд с внутренним ссд кэшем (например exos) то больше. С EC добавляется read modify write, поэтому меньше при большой глубине раза в 2, а при малой упирается в чтение, т.е даже при внутреннем ссд кэше будет плохо
VO
это ты про запись на ec сказал? а если там чтение?
VO
а то у коллег появилась дурная идея туда кликхаусовские базы сунуть
DP
а то у коллег появилась дурная идея туда кликхаусовские базы сунуть
а зачем?