AA
Куда глядеть, что делать, как быть, манагеры бутылки готовят.
Size: a a a
2020 June 16
AA
дяденьки помогите)
DP
а на обновлении прода без обновления дева/стейджа - манагеры настояли? 🙂
DP
нет там никакого тиринга случайно?
AA
а на обновлении прода без обновления дева/стейджа - манагеры настояли? 🙂
до эитого 6 кластеров обновил все в проде
AA
нет там никакого тиринга случайно?
не, нету
IF
под какие цели nvme?
AA
цеф для proxmoxa
DP
смотрите в логах медленных запросов - на чем висят
DP
через сокет
AA
можно чуть подробней почти двое суток не спал(
Am
Ребят, всем привет, помогите с цефом в проде.
Жил был ceph со времен FIREFLY, успешно обновлялся и не вызывал проблем до сегодняшнего дня. Вчера обновил его с luminous до nautilus. Обновление прошло штатно, без каких либо ошибок.
После обновления, в кластере выстреливают slow ops на nvme дисках.
Ceph состоит из 8 нод, в каждой 8 HDD(hdd-pool) + 2 nvme(nvme-pool), между нодами cluster_network 10G.
Slow ops появляются на дисках в nvme-pool, всего в кластере 16 nvme.
8 slow ops, oldest one blocked for 41 sec, daemons [osd.0,osd.12,osd.30,osd.4,osd.40,osd.46,osd.49,osd.5,osd.60,osd.69]
Уменьшил влияние deep-scrub'a. Так же было замечено, что слоу опс генерятся во время compaction у rocksdb.
Жил был ceph со времен FIREFLY, успешно обновлялся и не вызывал проблем до сегодняшнего дня. Вчера обновил его с luminous до nautilus. Обновление прошло штатно, без каких либо ошибок.
После обновления, в кластере выстреливают slow ops на nvme дисках.
Ceph состоит из 8 нод, в каждой 8 HDD(hdd-pool) + 2 nvme(nvme-pool), между нодами cluster_network 10G.
Slow ops появляются на дисках в nvme-pool, всего в кластере 16 nvme.
8 slow ops, oldest one blocked for 41 sec, daemons [osd.0,osd.12,osd.30,osd.4,osd.40,osd.46,osd.49,osd.5,osd.60,osd.69]
Уменьшил влияние deep-scrub'a. Так же было замечено, что слоу опс генерятся во время compaction у rocksdb.
ceph-bluestore-tool repair делал на обновленных осд?
AA
да, конечно
Am
тогда компактни осд вручную
AA
пробовал, не помогает(
Am
если слоуопс на компкте возникает
Am
а и что за nvme?
AA
а и что за nvme?
INTEL_SSDPE2MX020T7