Телеграмм чат группы clickhouse

ну а по большому счету, зачем мне вообще wide? особенно если у меня 200 колонок? зачем мне эта груда файлов на дисковой системе? что я экономлю? несколько сиков внутри файла по сравнению с кучей открытых файл дескрипторов?

источник

22:03пожаловаться #5

D

Dj in ClickHouse не тормозит

Wolf Kreuzerkrieg

ну а по большому счету, зачем мне вообще wide? особенно если у меня 200 колонок? зачем мне эта груда файлов на дисковой системе? что я экономлю? несколько сиков внутри файла по сравнению с кучей открытых файл дескрипторов?

до первого альтер/дропа/add колонки - да

источник

22:03пожаловаться #6

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

это понятно, конечно

источник

22:04пожаловаться #7

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

дата иммьютабл в базе

источник

22:04пожаловаться #8

D

Dj in ClickHouse не тормозит

прям ни разу не добавляли колонки? о_О

источник

22:05пожаловаться #9

SC

Smoked Cheese in ClickHouse не тормозит

Wolf Kreuzerkrieg

ну а по большому счету, зачем мне вообще wide? особенно если у меня 200 колонок? зачем мне эта груда файлов на дисковой системе? что я экономлю? несколько сиков внутри файла по сравнению с кучей открытых файл дескрипторов?

никогда не читаешь по паре колонок из всех?

источник

22:07пожаловаться #10

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

Dj

прям ни разу не добавляли колонки? о_О

проще зажеать всю инфу снова чем делать мутацию на 2 триллиона строк, нет?

источник

22:08пожаловаться #11

SC

Smoked Cheese in ClickHouse не тормозит

добавить/удалить колонку это не мутация

источник

22:09пожаловаться #12

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

Smoked Cheese

никогда не читаешь по паре колонок из всех?

есть такое. ок, сики... сики на NVMe, дешевле грязи

источник

22:09пожаловаться #13

DC

Denny Crane (I don't... in ClickHouse не тормозит

Wolf Kreuzerkrieg

ну а по большому счету, зачем мне вообще wide? особенно если у меня 200 колонок? зачем мне эта груда файлов на дисковой системе? что я экономлю? несколько сиков внутри файла по сравнению с кучей открытых файл дескрипторов?

глубокое непонимание у вас про груду файлов

источник

22:09пожаловаться #14

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

Denny Crane (I don't work at Yandex (never did))

глубокое непонимание у вас про груду файлов

буду рад если просвятите

источник

22:09пожаловаться #15

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

Smoked Cheese

добавить/удалить колонку это не мутация

ваша правда, ляпнул не подумав :)

источник

22:11пожаловаться #16

D

Dj in ClickHouse не тормозит

Wolf Kreuzerkrieg

https://github.com/ClickHouse/ClickHouse/issues/12737

GitHub

Parts using COMPACT format are slower than WIDE · Issue #12737 · ClickHouse/ClickHouse

Describe the situation when using COMPACT format for parts queries significantly slower How to reproduce Which ClickHouse server version to use 2.4.4 CREATE TABLE statements for all tables involved...

вы бы хоть трейс, кол-во прочитанных строк. мб приложили наверно...

источник

22:12пожаловаться #17

SC

Smoked Cheese in ClickHouse не тормозит

Wolf Kreuzerkrieg

есть такое. ок, сики... сики на NVMe, дешевле грязи

есть ещё например оптимизация поиска, когда сначала читаются только колонки, необходимые для WHERE, находятся нужные ренжи строк и потом уже читаются все данные

источник

22:17пожаловаться #18

SC

Smoked Cheese in ClickHouse не тормозит

ну и на NVMe далеко не все живут

источник

22:17пожаловаться #19

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит

Dj

вы бы хоть трейс, кол-во прочитанных строк. мб приложили наверно...

мб наверное приложил бы если бы у меня был доступ к этому движку. пошлю запрос...

источник

22:20пожаловаться #20