Size: a a a

Ceph — русскоговорящее сообщество

2020 April 30

PA

Pavel Astakhov in Ceph — русскоговорящее сообщество
да
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Pavel Astakhov
всем привет, парни, подскажите, такие качели это нормально?

увеличил кол-во пг в пуле, цеф второй день ребалансится. как misplaced ratio опускается ниже 5% - накидывает еще 1-2% сверху и начинает все опять. картинка в статусе плюс-минус одинаковая все это время:

 data:
   pools:   9 pools, 337 pgs
   objects: 159.89M objects, 8.4 TiB
   usage:   28 TiB used, 26 TiB / 55 TiB avail
   pgs:     31091758/479666970 objects misplaced (6.482%)
            315 active+clean
            17  active+remapped+backfilling
            5   active+remapped+backfill_wait
это нормально, очухается
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
у меня около двух недель выравнивал, правда там было порядка 800 ТБ
источник

PA

Pavel Astakhov in Ceph — русскоговорящее сообщество
Irek Fasikhov
у меня около двух недель выравнивал, правда там было порядка 800 ТБ
а скорость ему как-то можно поднять? вчера перебрасывал порядка 500 объектов в секунду, сегодня около 100-200.
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Pavel Astakhov
а скорость ему как-то можно поднять? вчера перебрасывал порядка 500 объектов в секунду, сегодня около 100-200.
не парься че, это стандартная работа ceph'а
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
тем более нет degraded
источник

PA

Pavel Astakhov in Ceph — русскоговорящее сообщество
да я вообще полез менять пг-шки из-за алертов
           198 pgs not deep-scrubbed in time
           195 pgs not scrubbed in time

прикинул, что если увеличить количество, то должны скрабиться быстрее. а так он и отребилдиться не может, и скраб во время ребилда включать не хочется
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
Pavel Astakhov
да я вообще полез менять пг-шки из-за алертов
           198 pgs not deep-scrubbed in time
           195 pgs not scrubbed in time

прикинул, что если увеличить количество, то должны скрабиться быстрее. а так он и отребилдиться не может, и скраб во время ребилда включать не хочется
не будет скрабить те ПГ, которые ребилдятся
источник

VA

Vladislav Anchishkin in Ceph — русскоговорящее сообщество
Привет всем, подскажите почему может быть такая проблема?
источник

VA

Vladislav Anchishkin in Ceph — русскоговорящее сообщество
источник

k

k0ste in Ceph — русскоговорящее сообщество
Vladislav Anchishkin
Привет всем, подскажите почему может быть такая проблема?
Пизда 1/3 кластера.
источник

AS

Alexey Shanko in Ceph — русскоговорящее сообщество
Pavel Astakhov
а скорость ему как-то можно поднять? вчера перебрасывал порядка 500 объектов в секунду, сегодня около 100-200.
тут выше в чате было про слипы. снизить их в 0 и скорость будет максимальная. но клиенты начнут это замечать.
источник

PA

Pavel Astakhov in Ceph — русскоговорящее сообщество
Alexey Shanko
тут выше в чате было про слипы. снизить их в 0 и скорость будет максимальная. но клиенты начнут это замечать.
слипы уже давно нулевые, это знаю :)
немного помогли рестарты осд - почистились журналы wal и стало шустрее, но больше вытянуть не удается
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
k0ste
Пизда 1/3 кластера.
наверное потому что две ноды всего? )
источник

k

k0ste in Ceph — русскоговорящее сообщество
Irek Fasikhov
наверное потому что две ноды всего? )
Как мы могли до такого догадаться🤷‍♂️😁
источник

IF

Irek Fasikhov in Ceph — русскоговорящее сообщество
k0ste
Как мы могли до такого догадаться🤷‍♂️😁
😁
источник

ЕВ

Евгений Величко... in Ceph — русскоговорящее сообщество
Подскажите, для EC pool как высчитывается кол-во pg/pgp? Есть различия?
источник

ВН

Виталий На Заборе... in Ceph — русскоговорящее сообщество
Нет
источник

AM

Alexander Mamahtehok in Ceph — русскоговорящее сообщество
Pavel Astakhov
слипы уже давно нулевые, это знаю :)
немного помогли рестарты осд - почистились журналы wal и стало шустрее, но больше вытянуть не удается
Кол-во скрабов на осд поднмим если клиентов не жаль
источник

PA

Pavel Astakhov in Ceph — русскоговорящее сообщество
Alexander Mamahtehok
Кол-во скрабов на осд поднмим если клиентов не жаль
client:   3.8 MiB/s rd, 1010 KiB/s wr, 133 op/s rd, 57 op/s wr

там особо некого жалеть пока :)
источник