Телеграмм чат группы clickhouse

21:29пожаловаться #1

Привет. Ребят есть такая проблема, что некоторые данные уже могут существовать, а удалить или обновить я не могу в кликхаус, я могу просто для пачки новых данных поставить sign -1? В CollapseMergeTree?

21:59пожаловаться #2

Точнее для старых -1 а новых 1

21:59пожаловаться #3

Судя по документации...

21:59пожаловаться #4

Подскажите, кто-то пользовался? Нормально все?)

papa karlo in ClickHouse не тормозит

22:01пожаловаться #5

главное чтбы при этом старые -1 сколлапсировались с чем надо, а не с новыми +1

22:02пожаловаться #6

Это я так понял нужно чтоб колонки были идентичны конечно и сначала писать минусовые а потом закидывать +1 и все должно быть хорошо?

papa karlo in ClickHouse не тормозит

22:05пожаловаться #7

чтобы что-то исчезло надо чтобы значения в ключевых колонках были одинаковые, в остальных вообще говоря не важно что будет, просто в этом случае до коллапса можно странную аналитику получать.

papa karlo in ClickHouse не тормозит

22:08пожаловаться #8

и на всякий случай лучше зафорсить коллапс, optimize final для партиций, например.

22:09пожаловаться #9

Спасибо большое

22:09пожаловаться #10

Может кто то подскозать куда заглянуть на тему

Code: 306, e.displayText() = DB::Exception: Stack size too large. Stack address: 0x7f17cfeff000, frame address: 0x7f17d02ff450, stack size: 4197296, maximum stack size: 8392704 (version 20.3.5.21 (official build))

23:30пожаловаться #11

Anton

Может кто то подскозать куда заглянуть на тему

Code: 306, e.displayText() = DB::Exception: Stack size too large. Stack address: 0x7f17cfeff000, frame address: 0x7f17d02ff450, stack size: 4197296, maximum stack size: 8392704 (version 20.3.5.21 (official build))

а где и как ты такое получил то?

23:32пожаловаться #12

ответ на попытку вставить данные с помощью smi2/phpClickHouse пачкой в 400 записей

23:33пожаловаться #13

что то очень странное.
в идеале получить минимально воспроизводимый пример и на гитхаб скорее всего

23:34пожаловаться #14

Dmitry Titov

что то очень странное.
в идеале получить минимально воспроизводимый пример и на гитхаб скорее всего

слабо представляю как это воспроизвести, пока не сооброжу в кокую сторону поковырять (есть пару мыслей), но в целом думал может кто сталкивался с подобным

23:37пожаловаться #15

можно попробовать получить запрос, который формирует php драйвер(через брейкпоинты) и попробовать вставить через curl

23:37пожаловаться #16

данные беру из rabbit и пачками по 400 записей отправляю с помощью smi2/phpClickHouse в 13 таблиц раз в минуту, на 2 из них стал получать данное сообщение, помню что ClickHouse не очень любит частые мелкие вставки, может это быть связанно?

23:41пожаловаться #17

Anton

раз в минуту для 13 таблиц это нормально

23:42пожаловаться #18

про те таблицы на которых падает можешь сказать, что нибудь?

23:42пожаловаться #19

очень широкие и тд?