Size: a a a

ClickHouse не тормозит

2020 September 07

IP

Ivan V. Protchenko in ClickHouse не тормозит
Dj
вы путаете теплое с мягким. типы то разные. под капотом одинаковые, снаружи нет.


https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/#table_engine-mergetree-ttl
Для ТТЛ:
Выражения должны возвращать тип Date или DateTime.
Все что надо, кастите, и оно будет сравниваться с текущим временем на момент проверки.

ЗЫ. я так и не понял чего вы хотили добиться этим : "toYearWeek(clock) + 2" ? вам сколько надо хранить
я хочу понять для начала как управлять этим всем и как оно работает. Внезапно понял что необязательно в выражении ttl использовать ключ партиционирования toYearWeek(clock)
источник

IP

Ivan V. Protchenko in ClickHouse не тормозит
не на то ответил)
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
))
источник

D

Dj in ClickHouse не тормозит
Ivan V. Protchenko
я хочу понять для начала как управлять этим всем и как оно работает. Внезапно понял что необязательно в выражении ttl использовать ключ партиционирования toYearWeek(clock)
источник

D

Dj in ClickHouse не тормозит
Sanzhar Sarsenbi
Всем привет!

У меня странная проблема, я пытаюсь заинсертить в большую таблицу данные, если сделать по 1 строчке - то все ок, проходит, если же сделать даже 10 строк за 1 инсерт - то будет ошибка - Attempt to read after eof

Если например заинсертить 10 строк, но при этом внутри данные некоторые заменить на null (чтобы облегчить инстерт), то тоже проходит

видимо проблема именно в том, что много данных вставляется в широкую таблицу

Кто-нибудь знает, какие конфиги надо увеличить? Я просто не шарю в этом 🙁
> Attempt to read after eof

проверьте логи после этой ошибки, может быть то что КХ стреляется по ООМ или сегфолту и рестартует... (ну или фаерволл прибивает)
если так - то ищите детальней, что её вызывает
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
Dj
> Attempt to read after eof

проверьте логи после этой ошибки, может быть то что КХ стреляется по ООМ или сегфолту и рестартует... (ну или фаерволл прибивает)
если так - то ищите детальней, что её вызывает
Логов самое странное, что нет
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
а вообще я реально просто делаю инсерт 1 строки - работает, больше 5-ти например - уже эта ошибка
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
Спасибо за советы! Вы очень сильно мне помогаете
источник

D

Dj in ClickHouse не тормозит
Sanzhar Sarsenbi
Логов самое странное, что нет
systemctl status clickhouse-server.service


в строке Active смотрите когда последний раз стартанул
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
минуту
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
если окажется, что после запроса рестартанул - то это будет значит, что его OMKiller убил?
источник

D

Dj in ClickHouse не тормозит
да, значит надо смотреть логи, что происходило перет стартом (старт в КХ логах искать легко)

Starting ClickHouse 20.6.4.44
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
Dj
да, значит надо смотреть логи, что происходило перет стартом (старт в КХ логах искать легко)

Starting ClickHouse 20.6.4.44
Спасибо вам большое
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
Dj
да, значит надо смотреть логи, что происходило перет стартом (старт в КХ логах искать легко)

Starting ClickHouse 20.6.4.44
КХ не рестартовал 🙁
источник

D

Dj in ClickHouse не тормозит
Sanzhar Sarsenbi
КХ не рестартовал 🙁
тогда читайте логи внимательно до и после этой ошибки. Убедитесь, что логгинг у вас в трейс режиме
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
Dj
тогда читайте логи внимательно до и после этой ошибки. Убедитесь, что логгинг у вас в трейс режиме
понял, спасибо!
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
уверен, что в логах найдется, немного не хватает опыта
источник

SS

Sanzhar Sarsenbi in ClickHouse не тормозит
еще раз спасибо за помощь!
источник

SA

Sergei Alekseev in ClickHouse не тормозит
Добрый день! в версии 20.6.4.44 не было замечено никаких проблем с активным пожиранием места на диске?
источник

НМ

Никита Макушников... in ClickHouse не тормозит
Всем привет! Подскажите, пожалуйста, как можно восстановить таблицу с движком MergeTree() и стораджем s3 с одного кликхаус-сервера на другом, независимый?
источник