есть идеи в чем может быть проблема?

не все вставилось... так бывает... сделайте select count() сравнение табличек

count  по любому же будет меньше, так как производная табличка это сагрегированные данные?

добрый день, столкнулись с проблемой зависания таблицы (engine mysql), любая операция drop/rename/select вызывает бесконечное зависание. в логах запросов можно увидеть следующую ошибку:

Code: 473, e.displayText() = DB::Exception: WRITE locking attempt on "database.tablename" has timed out! (120000ms) Possible deadlock avoided. Client should retry. (version 20.4.4.18 (official build))

погуглили после этого, вроде пишут, что это баг, связанный с возникновением дедлока при alter таблицы и он был починен в 20.6 обновились до 21, но сама проблема никуда не исчезает, таблица залочена намертво. убиваем вручную запросы, которые с ней как либо связаны, но запрос на убийство запроса тоже зависает зачастую. кто-то сталкивался с таким поведением?

Всем привет
Уже сутки выполняется insert запрос запущенный через clickhouse client
Как узнать его прогресс, если на текущий момент в trace log он переименовывает tmp партиции

да, не заметил group by.
там у вас ещё aggregatedmt...

я после этого создал без aggmt, все равно не бьет

так может вы МВ создали позже чем начали наполнять сырую таблицу? зачем там вообще aggregating MT? я вообще потерял нить и в чем была проблема у вас...

select distinct [keys] from raw
select distinct [keys] from mv
дают разные значения?

сначала создал aggmt потом мне тут подсказали что не правильно, создал create table as select group by id, idto без aggmt
табличка создалась но разница при запросах примерно 2 раза с главной таблицей
249 против 479

Ну сделайте
Select from main where (id, idto) not in (select from new)

Возьмите первую попавшуюся строку.

И select from new where id=a and idto=b;

в err логах attempt to read after eof

ок сча попробую

да, данных нет в производной таблице

ну у вас не все вставилось тогда, инсерт умер не дойдя до конца

получается нет решения для high cardinality group by?

select id, idto from rawtable group by id, idto;
select distinct id,idto from rawtable;

оба должны работать без проблем

всего 700 ГБ памяти, max_memory_usage выставлен 600 max_memory_usage_before_external_group_by 300GB, данные спиллятся на диск, но вылетает по ООМ, что может быть не так?

в dmesg ругается 'clickhouse-serv' uses 32-bit capabilities

Привет всем, настраивал кто-нибудь уже с 21.2.2.8 LDAP с мапингом ролей? Вроде все сделал как написано в конфигах, настроил фильтры и тд. Пытаюсь войти, CH дергает LDAP, там все успешно, но дальше выдает что не пущу, а за ролями даже не идет (смотрю в wireshark) 😕