Телеграмм чат группы clickhouse

Испортились данные, КХ ругается на отсутвие файла

DB::Exception: File not found: /var/lib/clickhouse/data/sbx_logs/log/532578cd254e8c9868dde6ead44e13b4_25391_29404_2275/datetime.mrk2

но как-то восстановить можно?

Нельзя восстановить. А что случилось? Диск побился?

14:52пожаловаться #1

диск ссд у зк? В логе если смотреть часто снепшоты создаются?

ссд

снепшоты посмотрю

14:52пожаловаться #2

диск ссд у зк? В логе если смотреть часто снепшоты создаются?

снепшлоты раз в пару минут создаются

14:53пожаловаться #3

ссд

снепшоты посмотрю

а памяти сколько у zk Xmx? И сколько размер файлика снепшота?

14:53пожаловаться #4

а памяти сколько у zk Xmx? И сколько размер файлика снепшота?

-Xmx1000m
Не более 50 мб снапшот

14:56пожаловаться #5

Aleh Sauko

подскажите пожалуйста в настройках кх для репликации:
- interserver_http_host
- macros/replica
стоят внешний aws ip-шники, как правильно их можно переключить на внутренние aws ip-шники, какой порядок действий?

макросы менять нельзя. Макросы это просто имена -- они ни что не влияют.

Остальное заменить и сребутить

14:57пожаловаться #6

-Xmx1000m
Не более 50 мб снапшот

А сколько памяти у сервера?

14:57пожаловаться #7

А сколько памяти у сервера?

ram?

14:57пожаловаться #8

Aleh Sauko in ClickHouse не тормозит

макросы менять нельзя. Макросы это просто имена -- они ни что не влияют.

Остальное заменить и сребутить

спасиба)

14:57пожаловаться #9

или на диске?

14:57пожаловаться #10

ram?

Озу

14:58пожаловаться #11

Озу

32гб

14:58пожаловаться #12

3 ноды

14:58пожаловаться #13

Забыл уточнить. Нагрузка на диск в 65% только на лидере

14:59пожаловаться #14

Забыл уточнить. Нагрузка на диск в 65% только на лидере

покажите sar -d 1 10 с лидера

Pavel in ClickHouse не тормозит

15:00пожаловаться #15

Для какого движка ?

ReplacingMergeTree, да вроде локализировали, что у ReplacingMergeTree не было указано поле, по которому необходимо сортировать эвенты в случае оптимизации

15:21пожаловаться #16

Pavel

для replcing нельзя делать deduplicate и бессмысленно. Простой оптимайз уже убирает по ключу. Deduplicate создан только для простого mergetree потому что там нет схлопывания при мержах

Pavel in ClickHouse не тормозит

15:24пожаловаться #17

Ну как я понимаю все-равно ключик в ReplacingMergeTree() вида ReplacingMergeTree(event_time) надо делать?

15:25пожаловаться #18

покажите sar -d 1 10 с лидера

сори, отходил
сейчас