Size: a a a

ClickHouse не тормозит

2021 January 13

PL

Piotr Liakhavets in ClickHouse не тормозит
Dj
Так у вас вставка не параллелится? Я думал селекты. По вставке insert_select куча параметров есть которые надо смотреть.
А есть где-то в сконцентрированом виде список? А то разрозненно натыкался на разные, а полной картины не сложил в голове
источник

D

Dj in ClickHouse не тормозит
nu %min_insert%, %max_insert% дефолтовые смотрите если системы одинаковые рядом
источник

S

Smartyru in ClickHouse не тормозит
Не подскажете, clickhouse_fdw  можно водрузить на Postgres 10.5 или 11я версия A MUST ?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
Всем привет. Пытаемся внедрить КХ для хранения cdr (лог звонков с АТС). Партиционирование по timestamp (yyyymm). При вводе в эксплуатацию начала валиться ошибка Too many parts (600). Merges are processing significantly slower than inserts. (version 20.12.5.14 (official build)). Пустил трафик через clickhouse-bulk (  "flush_count": 1000, "flush_interval": 5000 ) — ошибка не ушла. Добавил
<merge_tree>
   <parts_to_delay_insert>300</parts_to_delay_insert>
   <parts_to_throw_insert>600</parts_to_throw_insert>
   <max_delay_to_insert>2</max_delay_to_insert>
   <max_suspicious_broken_parts>5</max_suspicious_broken_parts>
</merge_tree>
— всё равно ошибка не ушла. Что я делаю не так?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
и 7 ядер проца забито процессом КХ. это merge ?
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
ммм...  flush_count 10000?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
Вячеслав Владимиров
ммм...  flush_count 10000?
там больше 80 строк всё равно не накапливается. флашит по таймауту
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
раз в 5 сек?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
да
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
а точно кто-то еще не толкает инсерты?
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
Запись раз в 5 сек...
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
а  диск в порядке?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
там ещё апдейты через alter table валятся. они могут быть причиной хаоса? ещё и сервер падает периодически.
диск да, в норме
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
show processlist
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
кажет кучу стоящих инсертов?
источник

EZ

Egor Zagorskiy in ClickHouse не тормозит
в processlist ничего поймать не могу
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
апдейты - могут ))  У меня еще и подвисшие были. Пару дней назд тут же и подсказали
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
счас найду...
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
идешь в папку с данными базы
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
/var/lib/clickhouse/data/<db>/<table>
источник