Size: a a a

ClickHouse не тормозит

2020 June 08

TM

Tim Mustafin in ClickHouse не тормозит
Это такая умная обертка вокруг insert .. select, если проще говорить
источник

DT

Dmitry Titov in ClickHouse не тормозит
Tim Mustafin
clickhouse-copier с source=target?
есть какая то корреляция между K и V?
источник

TM

Tim Mustafin in ClickHouse не тормозит
нет, просто инты
источник

DT

Dmitry Titov in ClickHouse не тормозит
Tim Mustafin
Это такая умная обертка вокруг insert .. select, если проще говорить
Ну это я знаю, но люди от нее не в восторге и сами пилят аналоги, это я тоже знаю)
источник

DT

Dmitry Titov in ClickHouse не тормозит
Какого размера таблица?
источник

TM

Tim Mustafin in ClickHouse не тормозит
Dmitry Titov
Какого размера таблица?
Там миллиардами исчисляются туплы
источник

DT

Dmitry Titov in ClickHouse не тормозит
Tim Mustafin
Там миллиардами исчисляются туплы
а сколько колонок в таблице? и сколько ты забираешь только 1?
источник

TM

Tim Mustafin in ClickHouse не тормозит
Dmitry Titov
а сколько колонок в таблице? и сколько ты забираешь только 1?
4 колонки, забираю 1 по условию на другую
источник

TM

Tim Mustafin in ClickHouse не тормозит
По сути это табличка М2М отношения такая
источник

DT

Dmitry Titov in ClickHouse не тормозит
Tim Mustafin
4 колонки, забираю 1 по условию на другую
С каким настройками создавал индексы?
источник

DT

Dmitry Titov in ClickHouse не тормозит
ну выглядит так. что самый быстрый по скорости запроса вариант это создать обратную ей таблицу, тк вторичные индексы никогда такой скорости не достигнут
источник

TM

Tim Mustafin in ClickHouse не тормозит
Хотя бы от фуллскана бы избавиться :)
источник

TM

Tim Mustafin in ClickHouse не тормозит
Dmitry Titov
ну выглядит так. что самый быстрый по скорости запроса вариант это создать обратную ей таблицу, тк вторичные индексы никогда такой скорости не достигнут
Ага, были такие мысли, пришел уточнить, может быть индексы не так готовлю
источник

TM

Tim Mustafin in ClickHouse не тормозит
Dmitry Titov
С каким настройками создавал индексы?
INDEX bloom_filter_v tuple(v) TYPE bloom_filter GRANULARITY 4
источник

TM

Tim Mustafin in ClickHouse не тормозит
с min/max было так же примерно
источник

TM

Tim Mustafin in ClickHouse не тормозит
Но с min/max не очень идея, все-таки у меня V не лежит в каком-то узком диапазоне
источник

DT

Dmitry Titov in ClickHouse не тормозит
Tim Mustafin
INDEX bloom_filter_v tuple(v) TYPE bloom_filter GRANULARITY 4
чутка смущает tuple, но я индексы особо не трогал
источник

DT

Dmitry Titov in ClickHouse не тормозит
гранулярность +-адекватная, боюсь в таком случае помочь нечем:)
источник

ДА

Давид Авагимян... in ClickHouse не тормозит
Всем привет! Не подскажите есть ли возможность группировать данные по неделям? Допустим беру дата сет за 3 месяца и хочу разложить  его на 16 частей сгруппированных по 7 дней
источник

TM

Tim Mustafin in ClickHouse не тормозит
Dmitry Titov
гранулярность +-адекватная, боюсь в таком случае помочь нечем:)
Спасибо, буду знать, что попробовал все :)
источник