Size: a a a

ClickHouse не тормозит

2020 May 26

ЕА

Егор Андреевич... in ClickHouse не тормозит
а что мешает? сейчас примерно такое распределение
источник

S

Shazo in ClickHouse не тормозит
cached освобождается по мере необоходимости.
источник

S

Shazo in ClickHouse не тормозит
С чего вы взяли что у вас не хватает памяти лучше опишите
источник

И

Иван in ClickHouse не тормозит
а запрос который по памяти падает сколько её просил?
источник

И

Иван in ClickHouse не тормозит
логи желательно посмотреть
источник

N

Nikolay in ClickHouse не тормозит
Егор Андреевич
а что мешает? сейчас примерно такое распределение
Конкретный запрос и мешает. Он поедает очень много памяти . Даже вытеснив cached ему не хватает
источник

A

Alex in ClickHouse не тормозит
Привет. При создании MergeTree я хочу указать ORDER BY и Партиции, но если я делаю это указав index, то ошибка, что MergeTree должен быть пустым если указаны доп. параметры... как мне тогда индекс добавить правильно подскажите пожалуйста?

CREATE TABLE test () ENGINE=MergeTree(date,(sh_keyword_id, dic_language_id), 8192) ORDER BY (date)...
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
Судя по query_log'у прям жрущих запросов нет, их в целом много и достаточно регулярно проскакивают исключения
Memory limit (total) exceeded
- исключение может возникнуть на любом запросе будь то вставка или выборка, на жрущем, на не жрущем
источник

И

Иван in ClickHouse не тормозит
Alex
Привет. При создании MergeTree я хочу указать ORDER BY и Партиции, но если я делаю это указав index, то ошибка, что MergeTree должен быть пустым если указаны доп. параметры... как мне тогда индекс добавить правильно подскажите пожалуйста?

CREATE TABLE test () ENGINE=MergeTree(date,(sh_keyword_id, dic_language_id), 8192) ORDER BY (date)...
во-первых используйте новый формат для создания таблиц (я возможно что-то не понял но там смесь нового и старого формата)
источник

S

Shazo in ClickHouse не тормозит
Егор Андреевич
Судя по query_log'у прям жрущих запросов нет, их в целом много и достаточно регулярно проскакивают исключения
Memory limit (total) exceeded
- исключение может возникнуть на любом запросе будь то вставка или выборка, на жрущем, на не жрущем
Вы меняли лимиты по памтяи  для профиля пользователя? Возможно вы в стандартные упираетесь?
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
Shazo
Вы меняли лимиты по памтяи  для профиля пользователя? Возможно вы в стандартные упираетесь?
ничего не трогали, все по умолчанию.
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
но кажется другая была бы ошибка, если бы упирались в лимиты по настройкам
источник

И

Иван in ClickHouse не тормозит
Егор Андреевич
Судя по query_log'у прям жрущих запросов нет, их в целом много и достаточно регулярно проскакивают исключения
Memory limit (total) exceeded
- исключение может возникнуть на любом запросе будь то вставка или выборка, на жрущем, на не жрущем
1) включите логгирование для всех запросов
2) найдите упавший по памяти запрос
3) соберите логи для него из /var/log/clickhouse-server/clickhouse-server.log
источник

S

Shazo in ClickHouse не тормозит
Егор Андреевич
ничего не трогали, все по умолчанию.
Проверьте значения  в /etc/clickhouse-server/users.xml для профиля под котором выполняются запросы:
max_memory_usage_for_user, max_memory_usage_for_all_queries, max_memory_usage
источник

И

Иван in ClickHouse не тормозит
Егор Андреевич
а что мешает? сейчас примерно такое распределение
у вас без нагрузки клик ест 38Гб? а сколько у вас словарей подключено и сколько они места занимают? после рестарта он сразу занимает 38Гб или что-то случилось и он столько занял? имхо -многовато будет если у вас нет словарей тяжелых
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
Иван
у вас без нагрузки клик ест 38Гб? а сколько у вас словарей подключено и сколько они места занимают? после рестарта он сразу занимает 38Гб или что-то случилось и он столько занял? имхо -многовато будет если у вас нет словарей тяжелых
без нагрузки не могу сказать сколько ест, это продуктовая база и нагрузка на нее довольно большая, словарей нет вообще
источник

И

Иван in ClickHouse не тормозит
Егор Андреевич
без нагрузки не могу сказать сколько ест, это продуктовая база и нагрузка на нее довольно большая, словарей нет вообще
в любом случае сначала надо заглянуть в логи(если они включены) или включить их. Я конечно могу быть в чём-то не прав, но пока это гадание
источник

A

Alex in ClickHouse не тормозит
Иван
во-первых используйте новый формат для создания таблиц (я возможно что-то не понял но там смесь нового и старого формата)
спасибо
источник

MP

Maxim Pronkin in ClickHouse не тормозит
Народ подскажите это баг или фича, не могу при работе с внешним словарем указать тип данных Decimal(18, 4).
Decimal32(4) так же не работает.
Работает только Float32.
источник

PS

Pavel Sayapin in ClickHouse не тормозит
Народ, кто-нибудь обновлялся до 20.4.3.16? Были ли какие-то проблемы, кроме бессмертных запросов?
источник