S
звучит так себе
Size: a a a
2021 October 20
S
плюс, если удалить именно pg - ты теряешь данные которые хранились в данной пг
W
На именно той osd. На других ты её не удаляешь.
S
ну и как его удалить, если у тебя есть пг, с 3 копиями, а цеф говорит что эти три копии назодятся в инконсистент состоянии
S
поидее он на этом месте должен спотыкнуться
W
ceph-objectstore-tool --data-path /var/lib/ceph/osd/ceph-42 --op remove --pgid 5.43W
Меня это спасло с битыми чексумами в евент логе.
W
Удалил pg в которой были битые эвенты (узнал через gdb) и всё завелось.
W
Перед этим на всякий случай сделал --op export всей pg, но он не пригодился.
S
Не, спасибо за кейс. Просто прям звучит вкусно как для продакшена
W
Ну тут уже я хз тогда. Надо с gdb бы поглядеть, в чем бяка. Иначе только гадание.
W
Нз :)
И да, у меня это было на продакшин s3 кластере, но тогда у меня ещё и две реплики из трёх сдохли (бомжецепх, увы, доэкономлись). Осталось одна с битыми чексуммами. Особо вариантов не было.
И да, у меня это было на продакшин s3 кластере, но тогда у меня ещё и две реплики из трёх сдохли (бомжецепх, увы, доэкономлись). Осталось одна с битыми чексуммами. Особо вариантов не было.
S
а тут все вендорское, и серваки, и блины, и ссд (все сасс)
S
с поверлост протекшин и тп
S
а при этом сыпится ка кднищецеф
W
¯\_(ツ)_/¯
Am
инконсистент не обязательно что-то посыпалось, вероятнее всего не смог прочитать одну из реплик. вариантов почему может быть вагон и маленькая телега. но конечно частое появление инконсистента это не хорошо, да
S
я бы не сказал, что частое, но уже раз третий
S
в разных позициях сэтапа кластера