Size: a a a

ClickHouse не тормозит

2021 January 18

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
Denny, так что насчет:
Что лучше (быстрее-проще-дешевле)  Сразу инсертить в суммари таблицу или инсертить в движок нулл, а с него в суммари мат.Вью?
Вроде как через null представляется лучше - сразу пойдет групировка и не надо "схлопывать" потом. Или это увеличивает стоимость инсертов и они у меня в очередь выстроятся из-за группировки?
источник

TG

Tagir Gumerov in ClickHouse не тормозит
Вячеслав Владимиров
Denny, так что насчет:
Что лучше (быстрее-проще-дешевле)  Сразу инсертить в суммари таблицу или инсертить в движок нулл, а с него в суммари мат.Вью?
Вроде как через null представляется лучше - сразу пойдет групировка и не надо "схлопывать" потом. Или это увеличивает стоимость инсертов и они у меня в очередь выстроятся из-за группировки?
Обычно <insert> -> null -> mv -> <target> используют для "приведения" данных к должному виду таблицы.
Но нет гарантии, что дубликаты будут в одном инсерте (а ведь он ещё на парты может делиться).
Имхо если вы не протестируете на своих данных, вы так только размажете логику, не получив никаких плюшек.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Вячеслав Владимиров
Denny, так что насчет:
Что лучше (быстрее-проще-дешевле)  Сразу инсертить в суммари таблицу или инсертить в движок нулл, а с него в суммари мат.Вью?
Вроде как через null представляется лучше - сразу пойдет групировка и не надо "схлопывать" потом. Или это увеличивает стоимость инсертов и они у меня в очередь выстроятся из-за группировки?
ну в этом случае MV+Null

можно и тоже самое сделать через input function, просто в insert
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
логика - мне не нужны исходные данные, достаточно хранить суммированные
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
вопрос - где делать суммирование - в MV или Summ Eng таблице
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Вячеслав Владимиров
вопрос - где делать суммирование - в MV или Summ Eng таблице
в MV
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
меньше строк, меньше i/o , все быстрее
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
т.е. insert null -> MV -> dest табл
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
спасибо
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
очень удобен кстати синтаксис МV, который через TO.  МНе сейчас просто надо создать нулл табл и перекинуть вставку в существующий Суммари.
источник
2021 January 19

D

Dj in ClickHouse не тормозит
https://github.com/ClickHouse/ClickHouse/pull/18112

а суть этого только чтобы они не висели в памяти постоянно, а только грузились во время запроса?
или там появился новый хеш которые ест меньше места в памяти?
источник

DT

Dmitry Titov in ClickHouse не тормозит
Dj
https://github.com/ClickHouse/ClickHouse/pull/18112

а суть этого только чтобы они не висели в памяти постоянно, а только грузились во время запроса?
или там появился новый хеш которые ест меньше места в памяти?
Как я понимаю, что бы можно было указать диск отличный от default
источник

D

Dj in ClickHouse не тормозит
Dmitry Titov
Как я понимаю, что бы можно было указать диск отличный от default
а, понятно, те что для чтения при загрузке...
источник

D

Dj in ClickHouse не тормозит
дожжжжждалась? =)

Now ClickHouse can pretend to be a fake ZooKeeper. Currently, storage implementation is just stored in-memory hash-table, and server partially support ZooKeeper protocol. #16877 (alesapin).
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
ОMG...  неужто без ЗК можно будет жить?
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
Dj
дожжжжждалась? =)

Now ClickHouse can pretend to be a fake ZooKeeper. Currently, storage implementation is just stored in-memory hash-table, and server partially support ZooKeeper protocol. #16877 (alesapin).
❤️
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
(это не спам, это реакция на кх без зк)
источник

АК

Азатот Кемаль ибн Ра... in ClickHouse не тормозит
Вячеслав Владимиров
ОMG...  неужто без ЗК можно будет жить?
простите,  но мы 3 года назад использовали КХ без ЗК :) правда не в кластере
источник

OG

Oleg Gavrilov in ClickHouse не тормозит
Азатот Кемаль ибн Рашид
простите,  но мы 3 года назад использовали КХ без ЗК :) правда не в кластере
Простите, а зачем кх не в кластере зк?
источник

K

KiLEX 萊赫 in ClickHouse не тормозит
Oleg Gavrilov
Простите, а зачем кх не в кластере зк?
бывают случаи когда надежности безкластерного решения достаточно. ну или отказоустойчивость обеспечена другими методами
источник