Size: a a a

ClickHouse не тормозит

2020 August 28

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Konstantin
total        used        free      shared  buff/cache   available
Mem:            15G        4,4G        7,3G        327M        3,8G         10G
Swap:          511M        511M          0B
это уже после рестарта?

а что ошибка на  каждый запрос и повторяется до рестарта?
источник

K

Konstantin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
это уже после рестарта?

а что ошибка на  каждый запрос и повторяется до рестарта?
Да, именно такое поведение
источник

K

Konstantin in ClickHouse не тормозит
После рестарта
источник

D

Dj in ClickHouse не тормозит
Грищенко Максим
Есть в dictionaries, и даже видно что работает, дата обновления меняется.
bug тогда, я после drop table могу детач делать...
а у вас, можно либо рестартнуть, либо подставить sql файл и починить/дропнуть потом (но без шелла вам только ждать)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
понятно что баг/не доделали. Надо просто сделать чтобы drop table в этом случае делал drop dictionary
источник

K

Konstantin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
это уже после рестарта?

а что ошибка на  каждый запрос и повторяется до рестарта?
Нагрузка +- одинаковая
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
понятно что баг/не доделали. Надо просто сделать чтобы drop table в этом случае делал drop dictionary
ну или не дропал вообще ) в 20.3 он дает ошибку, но sql файлик сносит ) и тут баг и в 20.6 баг )
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Konstantin
Нагрузка +- одинаковая
ну free -h проверьте перед рестартом, или может у вас график памяти есть ? Скорее всего вся память уходит
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Dj
ну или не дропал вообще ) в 20.3 он дает ошибку, но sql файлик сносит ) и тут баг и в 20.6 баг )
баг это если раньше работало  😁
источник

K

Konstantin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
ну free -h проверьте перед рестартом, или может у вас график памяти есть ? Скорее всего вся память уходит
Проблема в том, что когда он перестает отвечать, вся память уже высвобождается.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Konstantin
Проблема в том, что когда он перестает отвечать, вся память уже высвобождается.
может у вас график памяти есть ?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Konstantin
Проблема в том, что когда он перестает отвечать, вся память уже высвобождается.
и попробуйте system drop mark cache вместо рестарта
источник

ZZ

Zorro Zorroff in ClickHouse не тормозит
Dj
>Storage MergeTree
просто вот это непрозрачно намекает, что у вас там просто МТ
Оказывается одна из таблиц была не таблица а view которое было неправильно написано, с final на mergetree.
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
баг это если раньше работало  😁
ну вот, сейчас экстраполируем так что нерабочий ОДБС (уже 3 версии не работает как бы) объявим не багом а фичей =)
источник

D

Dj in ClickHouse не тормозит
Zorro Zorroff
Оказывается одна из таблиц была не таблица а view которое было неправильно написано, с final на mergetree.
никогда такого не было, и вот опять...
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
рафик не виноват
источник

ZZ

Zorro Zorroff in ClickHouse не тормозит
Dj
никогда такого не было, и вот опять...
готовил вам тест кейс..... спасибо всем в етом чати!
источник

K

Konstantin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
может у вас график памяти есть ?
Есть, только не под руками. Но меньше 2gb не остается. Судя по таймингам, есть подозрение на ее утечку.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Konstantin
Есть, только не под руками. Но меньше 2gb не остается. Судя по таймингам, есть подозрение на ее утечку.
в след. раз попробуйте system drop mark cache вместо рестарта

это скорее всего не утечка, просто так оно работает на 16. Надо пилить параметры.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
проблема в том что во первых mark_cache разрастается до дефолтных 5Г.
и треды выполняющие запросы не (сразу) возвращают память чтобы ее не аллоцировать снова
получается тред выполнил запрос нажрал памяти сидит, след.запрос попадает другому треду, он тоже нажирает и т.д.
это все задумано и тестируется на серверах где 64+ и там такой проблемы нет, и зато быстро работает
источник