Log in for full access

Солюшен со страницы

Спасибо за совет! Но боюсь в моем случае не bluestore кеш ест память:

# ceph daemon osd.1 dump_mempools                                             
{
    "mempool": {
        "by_pool": {
            "bloom_filter": {
                "items": 0,
                "bytes": 0
            },
            "bluestore_alloc": {
                "items": 54167,
                "bytes": 4333360
            },
            "bluestore_cache_data": {
                "items": 728,
                "bytes": 934432
            },
            "bluestore_cache_onode": {
                "items": 1051,
                "bytes": 647416
            },
            "bluestore_cache_meta": {
                "items": 56392,
                "bytes": 403049
            },
            "bluestore_cache_other": {
                "items": 8189,
                "bytes": 1182880
            },
            "bluestore_Buffer": {
                "items": 61,
                "bytes": 5856
            },
            "bluestore_Extent": {
                "items": 2324,
                "bytes": 111552
            },
            "bluestore_Blob": {
                "items": 2256,
                "bytes": 234624
            },
            "bluestore_SharedBlob": {
                "items": 2245,
                "bytes": 251440
            },
            "bluestore_inline_bl": {
                "items": 117,
                "bytes": 31376
            },
            "bluestore_fsck": {
                "items": 0,
                "bytes": 0
            },
            "bluestore_txc": {
                "items": 14,
                "bytes": 10416
            },
            "bluestore_writing_deferred": {
                "items": 28,
                "bytes": 3990293
            },
            "bluestore_writing": {
                "items": 19,
                "bytes": 79712013
            },
            "bluefs": {
                "items": 434,
                "bytes": 15688
            },
            "bluefs_file_reader": {
                "items": 62,
                "bytes": 6848384
            },
            "bluefs_file_writer": {
                "items": 3,
                "bytes": 672
            },
            "buffer_anon": {
                "items": 167,
                "bytes": 2307587
            },
            "buffer_meta": {
                "items": 114,
                "bytes": 10032
            },
            "osd": {
                "items": 637,
                "bytes": 8240232
            },
            "osd_mapbl": {
                "items": 0,
                "bytes": 0
            },
            "osd_pglog": {
                "items": 20048285,
                "bytes": 2136951288
            },
            "osdmap": {
                "items": 5926,
                "bytes": 913264
            },
            "osdmap_mapping": {
                "items": 0,
                "bytes": 0
            },
            "pgmap": {
                "items": 0,
                "bytes": 0
            },
            "mds_co": {
                "items": 0,
                "bytes": 0
            },
            "unittest_1": {
                "items": 0,
                "bytes": 0
            },
            "unittest_2": {
                "items": 0,
                "bytes": 0
            }
        },
        "total": {
            "items": 20183219,
            "bytes": 2247135854
        }
    }
}

Что, pg_log не транкейтится и pg много?

Руками запускал, пишет что даже 1000 строк нет в логе ни на одном PG. А вот PG на диск 255, ругается что много.

Привет
spillover в наутилус победили?
сейчас у меня не влезает в 30 гб
Есть возможность сделать не 300 гб для db?

возможность есть

Ребят а какой параметр отвечает за детализацию ceph.log, собака диск переполняет.

debug_*

И даже работать будет?)

https://yourcmc.ru/wiki/%D0%9F%D1%80%D0%BE%D0%B8%D0%B7%D0%B2%D0%BE%D0%B4%D0%B8%D1%82%D0%B5%D0%BB%D1%8C%D0%BD%D0%BE%D1%81%D1%82%D1%8C_Ceph вот туть "Про размер block.db"

насколько я помню устройство роксдб, тебе надо сначала убедиться что ты влезаешь в ссд в принципе. сходить в лог ceph-osd он там иногда статистику по компакту выкладывает, там будет тотал(строчка sum)
потом изменить max_bytes_for_level_base или max_bytes_for_level_multiplier так, чтобы у тебя максимальный размер последнего левела влезал в ссд, тогда роксдб не будет пытаться его спилловернуть

Ребят, в первый раз с ceph имею дело ) Надо юзера добавить на все бакеты только чтение)

загуглил такое radosgw-admin caps add --uid=readonly_test --caps="buckets=read"

но не работает, что-то я не так понял, видимо, пните, плз, в какую сторону копать)

создать просто юзера отдельно, затем на существующий бакет повесить политику

а на все бакеты можно ?

ок спс)

задеплоено через rook.io, в поде rook-ceph-tools нет s3cmd) есть ceph и radosgw-admin