Телеграмм чат группы ceph

Помогите, добрые люди, горю синим пламенем. Клиент урод выдернул питание из стойки, уложил все цеф, теперь 2 osd не поднялись и все стало колом. всего 6 серверов 20 осд

источник

13:34пожаловаться #6

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество

шишел мышел

Помогите, добрые люди, горю синим пламенем. Клиент урод выдернул питание из стойки, уложил все цеф, теперь 2 osd не поднялись и все стало колом. всего 6 серверов 20 осд

Не поднялись как?

источник

13:39пожаловаться #7

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество

Сдохли диски окончательно?

источник

13:39пожаловаться #8

шм

шишел мышел... in Ceph — русскоговорящее сообщество

нет, диски живые, вот один осд крошится вот с этим -332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 bluestore(/var/lib/ceph/osd/ceph
-4) _do_read bdev-read failed: (5) Input/output error
-332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 osd.4 0 failed to load OSD map f
or epoch 65272, got 0 bytes

источник

13:41пожаловаться #9

шм

шишел мышел... in Ceph — русскоговорящее сообщество

а после этого уже /home/jenkins-build/build/workspace/ceph-build/ARCH/x86_64/AVAILABLE_ARCH/x86_64
/AVAILABLE_DIST/centos7/DIST/centos7/MACHINE_SIZE/huge/release/13.2.8/rpm/el7/BU
ILD/ceph-13.2.8/src/osd/OSD.h: 823: FAILED assert(ret) и стек трейс

источник

13:42пожаловаться #10

шм

шишел мышел... in Ceph — русскоговорящее сообщество

на другом сервере mon не запускается monitor data directory at '/var/lib/ceph/mon/ceph-c2' is empty: have you run 'mkfs'?

источник

13:46пожаловаться #11

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество

шишел мышел

нет, диски живые, вот один осд крошится вот с этим -332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 bluestore(/var/lib/ceph/osd/ceph
-4) _do_read bdev-read failed: (5) Input/output error
-332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 osd.4 0 failed to load OSD map f
or epoch 65272, got 0 bytes

А второй с чем?

источник

13:49пожаловаться #12

шм

шишел мышел... in Ceph — русскоговорящее сообщество

а второй может и живой, но говорит failed to fetch mon config и останавливается

источник

13:52пожаловаться #13

шм

шишел мышел... in Ceph — русскоговорящее сообщество

есть смысл попытаться локальный mon запустить?

источник

13:52пожаловаться #14

VO

Vyacheslav Olkhovche... in Ceph — русскоговорящее сообщество

шишел мышел

нет, диски живые, вот один осд крошится вот с этим -332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 bluestore(/var/lib/ceph/osd/ceph
-4) _do_read bdev-read failed: (5) Input/output error
-332> 2020-11-21 09:08:11.587 7ff562c65b80 -1 osd.4 0 failed to load OSD map f
or epoch 65272, got 0 bytes

разве это похоже на живой диск?

источник

13:53пожаловаться #15

Am

Alexander mamahtehok in Ceph — русскоговорящее сообщество

шишел мышел

а второй может и живой, но говорит failed to fetch mon config и останавливается

Проверь конфиг

источник

13:55пожаловаться #16

шм

шишел мышел... in Ceph — русскоговорящее сообщество