А
Привет, кто-нибудь может подсказать в чём различие между distributed_product_mode=allow и distributed_product_mode=global? Либо же объяснить/кинуть ссылку как работают джоины в allow моде. Заранее спасибо! (:
Size: a a a
2021 March 01
P
Всем привет :) кто знает, как быстрее всего обновить retention policy для Graphite MT. Кроме переналивки базы есть эффективный способ? Видел, что предлагают рестарт кластера с новым rollup.xml , но по ощущениям ничего не происходит , если там инициируется какой-то фоновый отложенный ALTER, то каков этот механизм и есть ли где посмотреть прогресс? заранее спасибо!
DC
Артём 🦄
Привет, кто-нибудь может подсказать в чём различие между distributed_product_mode=allow и distributed_product_mode=global? Либо же объяснить/кинуть ссылку как работают джоины в allow моде. Заранее спасибо! (:
allow -- все шарды выполняют правую таблицу (подзапрос и тащят себе)
global -- инициатор выполняют правую таблицу (подзапрос), кладет результат в temporary таблицу и рассылает ее в шарды
global -- инициатор выполняют правую таблицу (подзапрос), кладет результат в temporary таблицу и рассылает ее в шарды
DC
Всем привет :) кто знает, как быстрее всего обновить retention policy для Graphite MT. Кроме переналивки базы есть эффективный способ? Видел, что предлагают рестарт кластера с новым rollup.xml , но по ощущениям ничего не происходит , если там инициируется какой-то фоновый отложенный ALTER, то каков этот механизм и есть ли где посмотреть прогресс? заранее спасибо!
retention policy --> перезагрузка
само полиси срабатывает в момент мержа. Мерж шедулер не назначает мержи на старые парты.
https://github.com/innogames/graphite-ch-optimizer
само полиси срабатывает в момент мержа. Мерж шедулер не назначает мержи на старые парты.
https://github.com/innogames/graphite-ch-optimizer
P
retention policy --> перезагрузка
само полиси срабатывает в момент мержа. Мерж шедулер не назначает мержи на старые парты.
https://github.com/innogames/graphite-ch-optimizer
само полиси срабатывает в момент мержа. Мерж шедулер не назначает мержи на старые парты.
https://github.com/innogames/graphite-ch-optimizer
Спасибо! т.е. если я хочу, например, проредить исторические данные , то мой путь только перезаливать их заново?
DC
Спасибо! т.е. если я хочу, например, проредить исторические данные , то мой путь только перезаливать их заново?
конечно нет
читайте дальше
читайте дальше
P
конечно нет
читайте дальше
читайте дальше
ага, спасиб
MK
всем привет. можно ли как то запретить автоматическое схлопываение в replacingmergetree
DC
всем привет. можно ли как то запретить автоматическое схлопываение в replacingmergetree
плохой вопрос. Вы спрашиваете буквально: "как бы мне ногу отпилить?".
DN
Отгрызть*
DC
Ну т.е. может вам ногти надо покрасить, обычно можно и без отпливания
D
всем привет. можно ли как то запретить автоматическое схлопываение в replacingmergetree
если временно, то SYSTEM STOP MERGES
https://clickhouse.tech/docs/ru/sql-reference/statements/system/#query_language-system-stop-merges
а если навсегда - у вас просто будет дохренища партов и КХ умрет
если отменить именно само схлопывание, меняйте тип таблицы.
https://clickhouse.tech/docs/ru/sql-reference/statements/system/#query_language-system-stop-merges
а если навсегда - у вас просто будет дохренища партов и КХ умрет
если отменить именно само схлопывание, меняйте тип таблицы.
DC
и можно в order by например datetime64 9 now(9) или UUID засунуть
D
и можно в order by например datetime64 9 now(9) или UUID засунуть
а старые данные тоже не схлопнутся если с DEFAULT добавить поле?
DC
а старые данные тоже не схлопнутся если с DEFAULT добавить поле?
кмк они в момент мержа вычисляются, потом уже схлапываются
2021 March 02
DN
как 2 запроса в одном сделать, у меня одна таблица. Сначала нужно выборку идентификаторов сделать и сгруппировать по ним. Блоки данных, которые соответствуют каждому идентификатору, нужно также на них сделать выборку с множественной группировкой по нескольким столбцам. и подсчетом количества сгруппированных строк. данные желательно на выходе получить вложенной структурой.
T
Доброе утро, есть какой нибудь гайд по расширению кластера КХ, и есть ли автоматизация балансировки "весов" на уровне ос? Нужна ли перезагрузка кластера после добавления нового шарда?
DC
как 2 запроса в одном сделать, у меня одна таблица. Сначала нужно выборку идентификаторов сделать и сгруппировать по ним. Блоки данных, которые соответствуют каждому идентификатору, нужно также на них сделать выборку с множественной группировкой по нескольким столбцам. и подсчетом количества сгруппированных строк. данные желательно на выходе получить вложенной структурой.
select some_group_column, groupArray( (col1, col2, col3) )
...
group by some_group_column
...
group by some_group_column
DC
Доброе утро, есть какой нибудь гайд по расширению кластера КХ, и есть ли автоматизация балансировки "весов" на уровне ос? Нужна ли перезагрузка кластера после добавления нового шарда?
никакого кластера в КХ нет. Никакого решардинга, никакой ребалансировки. Тупо Distributed таблица умеет при инстерте пихать больше строк в шарды с бОльшим весом.
1. нет. нету гайда
2. нет, можно в описании кластера использовать вес шарда, если вы конечно вставляете через distributed
3. нет, не нужна.
1. нет. нету гайда
2. нет, можно в описании кластера использовать вес шарда, если вы конечно вставляете через distributed
3. нет, не нужна.