BS
https://github.com/ClickHouse/ClickHouse/issues/1576
я так понимаю - вот тут покопать)
Size: a a a
2021 March 17
BS
VB
у меня в таких случаях при рестарте может рандомно ломаться реплика у какой-то таблички — приходится руками исправлять
VB
собственно сейчас так и произошло
TU
Почему партиционирование MV на движке AggregatingMergeTree идет по месяцам, несмотря на то, что вроде как должно быть по дням?
определение MV
SELECT DISTINCT
partition,
min_date,
max_date
FROM system.parts
WHERE (database = 'foobar') AND (table = '.inner.barfoo')
┌─partition─┬───min_date─┬───max_date─┐
│ 202103 │ 2021-03-17 │ 2021-03-17 │
└───────────┴────────────┴────────────┘
определение MV
CREATE MATERIALIZED VIEW foobar.barfoo (
`count` AggregateFunction(count),
`time` DateTime('UCT'),
`importance` String,
`_date` Date
)
ENGINE = AggregatingMergeTree(_date, (time, importance), 8192)
AS SELECT
countState() AS count,
toStartOfMinute(toDateTime(time)) AS time,
importance,
toDate(time) AS _date
FROM foobar.lolkek
GROUP BY time, importance
B
у меня в таких случаях при рестарте может рандомно ломаться реплика у какой-то таблички — приходится руками исправлять
и у меня
D
Почему партиционирование MV на движке AggregatingMergeTree идет по месяцам, несмотря на то, что вроде как должно быть по дням?
определение MV
SELECT DISTINCT
partition,
min_date,
max_date
FROM system.parts
WHERE (database = 'foobar') AND (table = '.inner.barfoo')
┌─partition─┬───min_date─┬───max_date─┐
│ 202103 │ 2021-03-17 │ 2021-03-17 │
└───────────┴────────────┴────────────┘
определение MV
CREATE MATERIALIZED VIEW foobar.barfoo (
`count` AggregateFunction(count),
`time` DateTime('UCT'),
`importance` String,
`_date` Date
)
ENGINE = AggregatingMergeTree(_date, (time, importance), 8192)
AS SELECT
countState() AS count,
toStartOfMinute(toDateTime(time)) AS time,
importance,
toDate(time) AS _date
FROM foobar.lolkek
GROUP BY time, importance
deprecated syntax:
date-column — The name of a column of the Date type. ClickHouse automatically creates partitions by month based on this column. The partition names are in the "YYYYMM" format.
date-column — The name of a column of the Date type. ClickHouse automatically creates partitions by month based on this column. The partition names are in the "YYYYMM" format.
D
Почему партиционирование MV на движке AggregatingMergeTree идет по месяцам, несмотря на то, что вроде как должно быть по дням?
определение MV
SELECT DISTINCT
partition,
min_date,
max_date
FROM system.parts
WHERE (database = 'foobar') AND (table = '.inner.barfoo')
┌─partition─┬───min_date─┬───max_date─┐
│ 202103 │ 2021-03-17 │ 2021-03-17 │
└───────────┴────────────┴────────────┘
определение MV
CREATE MATERIALIZED VIEW foobar.barfoo (
`count` AggregateFunction(count),
`time` DateTime('UCT'),
`importance` String,
`_date` Date
)
ENGINE = AggregatingMergeTree(_date, (time, importance), 8192)
AS SELECT
countState() AS count,
toStartOfMinute(toDateTime(time)) AS time,
importance,
toDate(time) AS _date
FROM foobar.lolkek
GROUP BY time, importance
пользуйте правильный синтаксис
partition by ...
partition by ...
TU
спасибо
TU
deprecated syntax:
date-column — The name of a column of the Date type. ClickHouse automatically creates partitions by month based on this column. The partition names are in the "YYYYMM" format.
date-column — The name of a column of the Date type. ClickHouse automatically creates partitions by month based on this column. The partition names are in the "YYYYMM" format.
а можно ссылку на источник, пожалуйста?
D
а можно ссылку на источник, пожалуйста?
https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/
ищем по слову "устаревший"
ищем по слову "устаревший"
TU
спасибо!
SC
Привет. После применения
use_minimalistic_part_header_in_zookeeper 1 (глобально на сервере) как можно старые партиции преобразовать под компактный формат хранения в зукипере? optimize final не прокатывает.VB
Ребят, после перезагрузки кликхауса оживает ddl_entry запрос на truncate table и зависает
как его можно прибить?
как его можно прибить?
D
я цитировал автора проблемы. У него не может быть того что вы подумали. У него цитата: "Хосты в локалке пинг около 1 мс"
Кстати после обновления клиента до последнего лтс проблема с ремонтом решилась. Версия ремоут сервера и его конфиг не менялся. Хз что было причиной
D
Подскажите такой момент: сейчас для вставки данных используется буфер т.к. источник генерит много однострочных инсертов.
Если использовать вставку через Null + MV то кх сам оптимизирует этот момент?
Если нет, то куда буфер прикручивать тогда?
Если использовать вставку через Null + MV то кх сам оптимизирует этот момент?
Если нет, то куда буфер прикручивать тогда?
R
Скажите, можно ли добавлять индекс для нескольких колонок в таблице и не для первичного ключа с помощью запроса из доки https://clickhouse.tech/docs/ru/sql-reference/statements/alter/index/?
K
Подскажите такой момент: сейчас для вставки данных используется буфер т.к. источник генерит много однострочных инсертов.
Если использовать вставку через Null + MV то кх сам оптимизирует этот момент?
Если нет, то куда буфер прикручивать тогда?
Если использовать вставку через Null + MV то кх сам оптимизирует этот момент?
Если нет, то куда буфер прикручивать тогда?
У нас так
Null + MV -> Buf -> MergeTree
Null + MV -> Buf -> MergeTree
K
подскажите, есть ли где-то более детальная информация по data skipping index’ам, кроме вот этой?
https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/#table_engine-mergetree-data_skipping-indexes
https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/#table_engine-mergetree-data_skipping-indexes
ПБ