DC
там просто через запятую
массивы через запятую в CSV ? это как воообще?
Size: a a a
2021 March 12
DC
мало ли, вдруг есть специальный тип, урлы там очень часто хранят же
нет
DC
в csv ячейки разделяются запятой, как можно внутри ячейки выпарсить массив если в массиве тоже запятые?
АФ
массивы через запятую в CSV ? это как воообще?
разделитель в CSV запятая, каждое поле в двойных кавычках, в некоторых полях перечисление доменов/телефонов через запятую
DC
разделитель в CSV запятая, каждое поле в двойных кавычках, в некоторых полях перечисление доменов/телефонов через запятую
>каждое поле в двойных кавычках
другое дело.
все можно
другое дело.
все можно
m
КХ может как-то открыть файлы leveldb\\rocksdb ?
m
Или подключиться к этим базам через remote() ?
SC
КХ может как-то открыть файлы leveldb\\rocksdb ?
нет
m
SC
там для данных используется собственный бинарный формат
DC
`select a,b from test.table
WHERE pr_dttm > (select max(pr_dttm) from test.table2) limit 200`
запрос выполняется адово долго, как будто он каждый раз считает величину из подзапроса, при том что считать ее надо ровно один раз. Раньше считалось быстро - кто-нибудь знает, это лечится какой-то опцией?
WHERE pr_dttm > (select max(pr_dttm) from test.table2) limit 200`
запрос выполняется адово долго, как будто он каждый раз считает величину из подзапроса, при том что считать ее надо ровно один раз. Раньше считалось быстро - кто-нибудь знает, это лечится какой-то опцией?
не воспроизводится
create table t(a Int64, b Int64, p DateTime) Engine=MergeTree order by a;
create table t2(a Int64, b Int64, p DateTime) Engine=MergeTree order by a;
insert into t(a) select number from numbers(100000000);
insert into t(a, p) select number, now() from numbers(1);
insert into t2(a) select number from numbers(100000000);
insert into t2(a, p) select number, now()-3600 from numbers(1);
select a,b from t
WHERE p > (select max(p) from t2) limit 200;
create table t(a Int64, b Int64, p DateTime) Engine=MergeTree order by a;
create table t2(a Int64, b Int64, p DateTime) Engine=MergeTree order by a;
insert into t(a) select number from numbers(100000000);
insert into t(a, p) select number, now() from numbers(1);
insert into t2(a) select number from numbers(100000000);
insert into t2(a, p) select number, now()-3600 from numbers(1);
select a,b from t
WHERE p > (select max(p) from t2) limit 200;
AG
Здравствуйте. У меня есть таблица с движком ReplacingMergeTree, в ней есть колонки с типами - DateTime, int,int, Nested.
партиция по DateTime, order by - по int-ам. Когда записи с одинаковым ключом попадает в разные партиции записи которые в более ранней партиции не удаляются. Подскажите пожалуйста, можно ли как-то удалить старые записи (без применения мутаций)
партиция по DateTime, order by - по int-ам. Когда записи с одинаковым ключом попадает в разные партиции записи которые в более ранней партиции не удаляются. Подскажите пожалуйста, можно ли как-то удалить старые записи (без применения мутаций)
2021 March 13
DC
Здравствуйте. У меня есть таблица с движком ReplacingMergeTree, в ней есть колонки с типами - DateTime, int,int, Nested.
партиция по DateTime, order by - по int-ам. Когда записи с одинаковым ключом попадает в разные партиции записи которые в более ранней партиции не удаляются. Подскажите пожалуйста, можно ли как-то удалить старые записи (без применения мутаций)
партиция по DateTime, order by - по int-ам. Когда записи с одинаковым ключом попадает в разные партиции записи которые в более ранней партиции не удаляются. Подскажите пожалуйста, можно ли как-то удалить старые записи (без применения мутаций)
нет нельзя. Replacing это побочный продукт мержей. Мержи производятся в рамках партиции.
если строк в таблице немного, то можно либо делать select ... from t final либо argMax / group by
строки останутся в таблице но их не будет в результате select
если строк в таблице немного, то можно либо делать select ... from t final либо argMax / group by
строки останутся в таблице но их не будет в результате select
AG
Таблица большая (
EA
Парни может кто помочь, уперлись в параметр. Метрика ClickHouseAsyncMetrics_MaxPartCountForPartition. Но не знаю где его поменять
EA
Может кто подсказать?
EA
долгое время писали только в один CH из 2-х, забились очереди на репликацию
DT
надо смотреть очередь репликации где застряло
EA
Стоит ли этот парметр менять?
EA
Партиции должны же увеличить производительность, чтобы быстрее они перечитались