Телеграмм чат группы clickhouse

можно попробовать добавлять в старую таблицу alias колонки

13:06пожаловаться #1

DT

Владимир Голубев

не совсем то, так я получаю один столбец. Сейчас объясню поподробнее.
У меня есть результат селекта для функций quantiles(0.5, 0.9, 0.95, 0.99)(columnOne) as columnOne, для нескольких столбцов. Я хочу развернуть это в двумерную таблицу где каждый ряд будет содержать название столбца и квантили для него.

а, такое можно сделать через ARRAY JOIN arr1 as a, arr2 as b

13:07пожаловаться #2

DT

можно попробовать добавлять в старую таблицу alias колонки

тогда тип не изменится же

13:07пожаловаться #3

DT

и колонки не переименовать к сожалению

13:07пожаловаться #4

D

тогда тип не изменится же

column alias toUInt32(oldColumnName)

13:08пожаловаться #5

D

или так нельзя?

13:08пожаловаться #6

DT

column alias toUInt32(oldColumnName)

а, скорее всего так и нужно.
тогда материализед вообще ненужно.

13:09пожаловаться #7

D

Alter rename column by alesapin · Pull Request #9948 · ClickHouse/ClickHouse

а, скорее всего так и нужно.
тогда материализед вообще ненужно.

https://github.com/ClickHouse/ClickHouse/pull/9948 жалко не подъехало в 20.3

GitHub

I hereby agree to the terms of the CLA available at: https://yandex.ru/legal/cla/?lang=en
Changelog category (leave one):

New Feature

Changelog entry (a user-readable short description of the cha...

13:13пожаловаться #8

DT

Alter rename column by alesapin · Pull Request #9948 · ClickHouse/ClickHouse

https://github.com/ClickHouse/ClickHouse/pull/9948 жалко не подъехало в 20.3

GitHub

I hereby agree to the terms of the CLA available at: https://yandex.ru/legal/cla/?lang=en
Changelog category (leave one):

New Feature

Changelog entry (a user-readable short description of the cha...

о, круто

Oleksii Mylotskyi in ClickHouse не тормозит

13:13пожаловаться #9

OM

Подскажите есть какая-то возможность ускорить Distributed Insert ? Чтобы Insert проходили не в один поток а в несколько. Потому как смотрю SHOW PROCESSLIST на втором шарде и там инсерты последовательно вставляются.

Владимир Голубев... in ClickHouse не тормозит

13:14пожаловаться #10

ВГ

SELECT
arrayJoin([1, 2, 3]) as one,
arrayJoin([4, 5, 6]) as two
возвращает 9 строк...(

13:14пожаловаться #11

DT

Владимир Голубев

SELECT
arrayJoin([1, 2, 3]) as one,
arrayJoin([4, 5, 6]) as two
возвращает 9 строк...(

нет, там разное поведение у arrayJoin и ARRAY JOIN arr1 as a, arr2 as b

13:14пожаловаться #12

DT

https://clickhouse.tech/docs/en/sql-reference/statements/select/array-join/

clickhouse.tech

ARRAY JOIN | ClickHouse Documentation

ARRAY JOIN Clause It is a common operation for tables that contain an array column to produce a new table that has a col

13:15пожаловаться #13

DT

Oleksii Mylotskyi

Подскажите есть какая-то возможность ускорить Distributed Insert ? Чтобы Insert проходили не в один поток а в несколько. Потому как смотрю SHOW PROCESSLIST на втором шарде и там инсерты последовательно вставляются.

если вас не устраивает скорость distributed вставки, возможно стоит от нее отказаться.
Все равно это не рекомендуется

13:16пожаловаться #14

D

о, круто

drop table if exists test;
create table test (pk1 Int32, val UInt64 ) ENGINE = MergeTree()  order by (pk1);
alter table test add column valnew UInt32 alias toUInt32(val);
select *,valnew from test;

select * - не возвращает алиас колонки, но для мердж engine - это не должно быть проблемой

13:16пожаловаться #15

DT

drop table if exists test;
create table test (pk1 Int32, val UInt64 ) ENGINE = MergeTree()  order by (pk1);
alter table test add column valnew UInt32 alias toUInt32(val);
select *,valnew from test;

select * - не возвращает алиас колонки, но для мердж engine - это не должно быть проблемой

ну да, так сделано, что бы работал INSERT SELECT *

13:16пожаловаться #16

D

спасибо, направили в нужное русло, и не надо трогать тысячи партов ) все "сошлось" теперь

Владимир Голубев... in ClickHouse не тормозит

13:19пожаловаться #17

ВГ

нет, там разное поведение у arrayJoin и ARRAY JOIN arr1 as a, arr2 as b

О, спасибо, это уже ближе похоже на желаемый результат)

Oleksii Mylotskyi in ClickHouse не тормозит

13:19пожаловаться #18

OM

если вас не устраивает скорость distributed вставки, возможно стоит от нее отказаться.
Все равно это не рекомендуется

Ну я так понимаю что если мне нужно иметь два шарда, то мне в любом случае нужен будет distributed insert я правильно понимаю идею, отказаться от шардов ? Или я что-то не так понял :(

13:20пожаловаться #19

DT

Oleksii Mylotskyi

Ну я так понимаю что если мне нужно иметь два шарда, то мне в любом случае нужен будет distributed insert я правильно понимаю идею, отказаться от шардов ? Или я что-то не так понял :(

вообще идеальное решение, это вы на стороне приложения знаете, какие данные куда класть.
Или допустим пользуетесь кафкой и топиками.
потому что дистрибьютед вставка умножает запись в 1.5-2 раза(сначала в дистрибьютед и только потом на нужный шард)