В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4064 membersпожаловаться на группу
2020 July 07

DC

Denny Crane (I don't... in ClickHouse не тормозит
Алексей Артамонов
@den_crane т.е увеличение ядер возможно не решит мою проблему?
И еще по ZK хотел уточнить. Я правильно понимаю что он используется только при ddl и ddlworker читает из ЗК команды и выполняет. Я не использую реплики
да, и можно не использовать ZK тогда вообще. Просто написать скрипт который выполняет sql на всех нодах, как это делали до появления on cluster
источник
23:08пожаловаться#1

D

Dima in ClickHouse не тормозит
Добрый вечер
Можно ли как то в онлайне дополнять массивы новыми элементами?

Попробовал ENGINE = SummingMergeTree(arr) ORDER BY (id)

Покидал пару тестовых инсертов:
insert into default.test(id,arr)
select 1 , [1,2,3]

insert into default.test(id,arr)
select 1 , [1,2,3,4]

insert into default.test(id,arr)
select 1 , [3,4,6]

select * from default.test final
На выходе
1  [1,2,3]

А хочу:
1 [1,2,3,4,6]
источник
23:11пожаловаться#2

D

Dmitry Koreckiy in ClickHouse не тормозит
Dima
Добрый вечер
Можно ли как то в онлайне дополнять массивы новыми элементами?

Попробовал ENGINE = SummingMergeTree(arr) ORDER BY (id)

Покидал пару тестовых инсертов:
insert into default.test(id,arr)
select 1 , [1,2,3]

insert into default.test(id,arr)
select 1 , [1,2,3,4]

insert into default.test(id,arr)
select 1 , [3,4,6]

select * from default.test final
На выходе
1  [1,2,3]

А хочу:
1 [1,2,3,4,6]
а какая схема у таблицы?
источник
23:13пожаловаться#3

D

Dima in ClickHouse не тормозит
Dmitry Koreckiy
а какая схема у таблицы?
Попробовал ENGINE = SummingMergeTree(arr) ORDER BY (id)
источник
23:14пожаловаться#4

SC

Smoked Cheese in ClickHouse не тормозит
а схема-то какая?
источник
23:14пожаловаться#5

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dima
Добрый вечер
Можно ли как то в онлайне дополнять массивы новыми элементами?

Попробовал ENGINE = SummingMergeTree(arr) ORDER BY (id)

Покидал пару тестовых инсертов:
insert into default.test(id,arr)
select 1 , [1,2,3]

insert into default.test(id,arr)
select 1 , [1,2,3,4]

insert into default.test(id,arr)
select 1 , [3,4,6]

select * from default.test final
На выходе
1  [1,2,3]

А хочу:
1 [1,2,3,4,6]
SummingMergeTree что должен делать? он у вас тупо перезатирает
можно с помощью SummingMergeTree nested сделать или с помощью AggregatingMT groupArray State
https://gist.github.com/den-crane/048ce66bc59f5577d56e42d76934682e
я бы наверное на SummingMergeTree + nested сделал.
источник
23:15пожаловаться#6

SC

Smoked Cheese in ClickHouse не тормозит
суммирование только для числовых типов работает
источник
23:16пожаловаться#7

D

Dmitry Koreckiy in ClickHouse не тормозит
похоже канкатенировать массивы и оставлять уники
источник
23:16пожаловаться#8

D

Dmitry Koreckiy in ClickHouse не тормозит
по моему там проще будет просто groupArray сделать и все
источник
23:17пожаловаться#9

D

Dima in ClickHouse не тормозит
Dmitry Koreckiy
по моему там проще будет просто groupArray сделать и все
тут хотелось бы чтоб в онлайне шли инсерты и сразу добавлялись элементы,а не каким то вторым процессом еще группировать  данные
источник
23:21пожаловаться#10

D

Dima in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
SummingMergeTree что должен делать? он у вас тупо перезатирает
можно с помощью SummingMergeTree nested сделать или с помощью AggregatingMT groupArray State
https://gist.github.com/den-crane/048ce66bc59f5577d56e42d76934682e
я бы наверное на SummingMergeTree + nested сделал.
спасибо,буду смотреть и пробовать
источник
23:21пожаловаться#11

D

Dmitry Koreckiy in ClickHouse не тормозит
В любом случае при использовании того же summing придется либо группировать либо  final использовать
источник
23:22пожаловаться#12

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dima
тут хотелось бы чтоб в онлайне шли инсерты и сразу добавлялись элементы,а не каким то вторым процессом еще группировать  данные
сразу КХ не умеет. Каждый инстерт -- отдельный парт. Парты мержатся, значения вычисляются.
источник
23:28пожаловаться#13
2020 July 08

M

Maxim Bogdanov in ClickHouse не тормозит
Подскажите, насколько Nullable сильно сажают производительность запросов?
источник
00:00пожаловаться#14

DC

Denny Crane (I don't... in ClickHouse не тормозит
Maxim Bogdanov
Подскажите, насколько Nullable сильно сажают производительность запросов?
До двух раз.
источник
00:02пожаловаться#15

M

Maxim Bogdanov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
До двух раз.
Спасибо. Возможно будет приемлимо. Без nullable и не придумать выхода особо.
источник
00:03пожаловаться#16

DC

Denny Crane (I don't... in ClickHouse не тормозит
Выход всегда есть. Когда-то nullв в кх не было совсем
источник
00:04пожаловаться#17

D

Dmitry Koreckiy in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
До двух раз.
а на каких операциях это заметно?
источник
00:05пожаловаться#18

M

Maxim Bogdanov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Выход всегда есть. Когда-то nullв в кх не было совсем
да тут ещё в размер упирается. Ведь Nullable экономит место, если значение колонки пустое? Исходя из доки и логики. У меня под 400 колонок, и в каждой записи может быть используется от силы 20-30 штук.
источник
00:05пожаловаться#19

SC

Smoked Cheese in ClickHouse не тормозит
Maxim Bogdanov
да тут ещё в размер упирается. Ведь Nullable экономит место, если значение колонки пустое? Исходя из доки и логики. У меня под 400 колонок, и в каждой записи может быть используется от силы 20-30 штук.
не совсем, у nullable колонок добавляется ещё один файл с флагом null для каждой ячейки
источник
00:06пожаловаться#20