IA
Просто это тоже работает. Только настройки подобрать надо тщательно
У нас через кафку уже работает, но эта фича призвана избавить от ручного батчинга
Size: a a a
2021 March 11
A
У нас через кафку уже работает, но эта фича призвана избавить от ручного батчинга
Подозреваю, что при достаточно интенсивном потоке ивентов будет иметь смысл так все и оставить. Но это чисто догадки.
A
Не я про новую фичу в роадмап
Но это интересно. Не процитируете?
IA
Но это интересно. Не процитируете?
https://m.youtube.com/watch?v=HPJOgzQkRls
Минуты 3 назад
Минуты 3 назад
A
https://m.youtube.com/watch?v=HPJOgzQkRls
Минуты 3 назад
Минуты 3 назад
Благодарствую
RO
Можно ли как то запрашивать кх на наличие доступных ресурсов програмно типа делать
RO
серсис тротлинга
RO
?
D
Всем привет. Подскажите, можно ли в КХ такое вытворять - в таблице уже есть какие-то строки с уникальным ключом, который статичен после его создания, остальные поля могут меняться. Так вот при инсерте надо сравнивать все остальные поля по этому ключу и если в свежей пачке вставляемых данных они отличаются - делать апдейт. Важно это делать в реалтайме, не при очередном слиянии.
A
Den
Всем привет. Подскажите, можно ли в КХ такое вытворять - в таблице уже есть какие-то строки с уникальным ключом, который статичен после его создания, остальные поля могут меняться. Так вот при инсерте надо сравнивать все остальные поля по этому ключу и если в свежей пачке вставляемых данных они отличаются - делать апдейт. Важно это делать в реалтайме, не при очередном слиянии.
Для этого есть соответствующие движки типа как ReplacingMergeTree и иже с ними. А, в реалтайме - тут без костылей вряд ли получится.
D
Для этого есть соответствующие движки типа как ReplacingMergeTree и иже с ними. А, в реалтайме - тут без костылей вряд ли получится.
ага, тоже вокруг него ходил, но вот это оттолкнуло - "Дедупликация данных производится лишь во время слияний"
A
Один из костылей - это принудительный запуск мерджа
D
Один из костылей - это принудительный запуск мерджа
как вариант, ок, спасибо
A
Den
как вариант, ок, спасибо
По перформансу весьма стремный, если честно, вариант
D
По перформансу весьма стремный, если честно, вариант
да. стоит предварительно взвесить, что дороже - сделать транкейт и заново наполнить таблицу или запустить слияние
BB
Добрый вечер.
https://presentations.clickhouse.tech/meetup28/new_features/#6 Работают только через курл?? можно ли создать например вью, в который передать параметр.
https://presentations.clickhouse.tech/meetup28/new_features/#6 Работают только через курл?? можно ли создать например вью, в который передать параметр.
D
Добрый вечер.
https://presentations.clickhouse.tech/meetup28/new_features/#6 Работают только через курл?? можно ли создать например вью, в который передать параметр.
https://presentations.clickhouse.tech/meetup28/new_features/#6 Работают только через курл?? можно ли создать например вью, в который передать параметр.
EF
a clickhouse умеет парсить json array или только jsonl?
почему-то не получается импортировать данные в таблицу в формате [{}, {}, {}] - какой тип нужно использовать? пробовал JSON, JSONString, JSONAsString
почему-то не получается импортировать данные в таблицу в формате [{}, {}, {}] - какой тип нужно использовать? пробовал JSON, JSONString, JSONAsString
EF
не хочется переписывать backend под jsonl