Size: a a a

ClickHouse не тормозит

2020 July 16

SC

Sergey Cherkashin in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
в партах хранятся отдельные файлик с метаданными для TTL, там лежит мин и макс дата expire, раз в сутки КХ проверяет метаданные и если диапазон совпадает с текущей датой, то начинает перезаписывать парт без expire записей, почему-то сейчас делается только один парт за раз, поставьте merge_with_ttl_timeout поменьше
Ок. Большое спасибо.
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
кстати чинят прям щаз https://github.com/ClickHouse/ClickHouse/pull/12548
источник

АК

Антон Куляшов... in ClickHouse не тормозит
А как выключить TTL на таблице? Есть синтаксис под это?
источник

VM

Vadim Metikov in ClickHouse не тормозит
Дмитрий
спасибо
Если таблица узкая можно вставлять и по 30м за раз и больше
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Антон Куляшов
А как выключить TTL на таблице? Есть синтаксис под это?
еще не сделали, можно modify и дату 50  лет например поставить
источник

M

Mikhail in ClickHouse не тормозит
привет, а кто-нибудь clickhouse-backup юзает в s3? он у меня съедает кучу памяти и цп на upload, его как-то можно обуздать?
источник

AE

Alexey Er in ClickHouse не тормозит
Подскажите плиз: нормально создавать в памяти табличку на 5К строк, чтобы её потом джойнить? Что-то иногда получаю долгий ответ (5с) при запросе к ней.

create table dates (
   timestamp Int32,
   date Date
)
engine Memory();
источник

AK

Alex Krash in ClickHouse не тормозит
Alexey Er
Подскажите плиз: нормально создавать в памяти табличку на 5К строк, чтобы её потом джойнить? Что-то иногда получаю долгий ответ (5с) при запросе к ней.

create table dates (
   timestamp Int32,
   date Date
)
engine Memory();
Выглядит норм, это копеечные размеры
источник

AE

Alexey Er in ClickHouse не тормозит
Спасибо. Наверно, тормозит не из-за особенностей движка...
Но переделаю от греха на MergeTree().
источник

A

Artur in ClickHouse не тормозит
Подскажите, можно ли сделать агрегацию по всем колонкам без их перечисления с использованием регулярок?
select avg(*) from ...
Пробовал так но это не работает
select avg(columns('.*')) from ...
источник

A

Alexey in ClickHouse не тормозит
Вечер добрый. Нужно удалить 37 параметров из поля с url'ом в селекте, я сделал вложенные cutURLParameter(cutURLParameter(... и запрос не работает и не отображается в show processlist; Есть какие-то варианты его заставить работаеть или другой workaround?
источник

AE

Alexey Er in ClickHouse не тормозит
Квоты заставил работать. Оказалось, что на select 1 квота не распространяется.

И вот он весь такой :(
источник

AE

Alexey Er in ClickHouse не тормозит
А лимита подключений юзера к шарду нет? Про кластер уж и не спрашиваю...
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Добрый всем день, скажите а system.preocess это таблица? Я могу на нее MV навесить? (есть проблемы с доступом к query_log)
источник

D

Dj in ClickHouse не тормозит
Artur
Подскажите, можно ли сделать агрегацию по всем колонкам без их перечисления с использованием регулярок?
select avg(*) from ...
Пробовал так но это не работает
select avg(columns('.*')) from ...
select avgForEach([COLUMNS('.*')]) from (
select 1 as a, 2 as b, 3 as c
UNION ALL
select 3 as a, 6 as b, 9 as c
);

-- [2,4,6]
источник

D

Dj in ClickHouse не тормозит
Dmitriy Novikov
Добрый всем день, скажите а system.preocess это таблица? Я могу на нее MV навесить? (есть проблемы с доступом к query_log)
не пробовал, но тоже интересно, расскажите потом
источник
2020 July 17

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dmitriy Novikov
Добрый всем день, скажите а system.preocess это таблица? Я могу на нее MV навесить? (есть проблемы с доступом к query_log)
нет, это просто отображение сишных структур (списков) памяти. В нее не делается инсертов, поэтому триггер MV работать не будет
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
нет, это просто отображение сишных структур (списков) памяти. В нее не делается инсертов, поэтому триггер MV работать не будет
( жаль но спасибо
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dmitriy Novikov
( жаль но спасибо
на самом деле вы спросили странное, наверняка вашу нужду надо делать по другому, вы уже в глухом лесу спрашиваете про библиотеку
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
на самом деле вы спросили странное, наверняка вашу нужду надо делать по другому, вы уже в глухом лесу спрашиваете про библиотеку
Моя нужда это использовать query_log. Но я пока что сижу на готом клике в облаке в котором можно 2.5 значения в конфиге поменять. Иного доступа нет, включить по умолчанию логирование не получится. Аналитиков тоже не заставлю вручную прописывать чтоб логирование было. Значит буду ждать как дадут bare metal (
источник