Телеграмм чат группы clickhouse_ru страница 8073

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4217 membersпожаловаться на группу

2020 August 21

l

lnuynxa in ClickHouse не тормозит

привет, подскажите пожалуйста как достать из массива элементы, индексы которых лежат в другом массиве? массивы разной длины
например есть массив значений [a,b,c,d,e,f,g] и массив индексов [2,5] как мне из первого массива сделать массив [b,e]?
оба массива у меня числовые

можно через SELECT arrayFilter((x,y)-> y IN ([2,5]), ['a','b','c','d','e','f','g'], arrayEnumerate(['a','b','c','d','e','f','g']))

источник

16:23пожаловаться #1

DO

Dew Oughter in ClickHouse не тормозит

можно через SELECT arrayFilter((x,y)-> y IN ([2,5]), ['a','b','c','d','e','f','g'], arrayEnumerate(['a','b','c','d','e','f','g']))

проблема в том что индексы я считаю отдельно с помощью arrayFilter( i, j -> j <> 0, arrayEnumerate(arr), arr)

источник

16:24пожаловаться #2

l

lnuynxa in ClickHouse не тормозит

проблема в том что индексы я считаю отдельно с помощью arrayFilter( i, j -> j <> 0, arrayEnumerate(arr), arr)

Так это не проблема, объедини просто этапы, тебе эти индексы только для этого нужны?

источник

16:25пожаловаться #3

DO

Dew Oughter in ClickHouse не тормозит

Так это не проблема, объедини просто этапы, тебе эти индексы только для этого нужны?

мне нужны эти индексы, чтобы выцепить соответствующие элементы из другого массива. при этом индексы эти я не могу вытянуть никак иначе
как объединить не совсем понимаю

источник

16:27пожаловаться #4

l

lnuynxa in ClickHouse не тормозит

мне нужны эти индексы, чтобы выцепить соответствующие элементы из другого массива. при этом индексы эти я не могу вытянуть никак иначе
как объединить не совсем понимаю

SELECT arrayFilter( i, j -> j <> 0, ['a','b','c','d','e','f','g'], arr)

источник

16:29пожаловаться #5

D

Dj in ClickHouse не тормозит

Oleksandr Diachenko

toUInt64()

источник

16:37пожаловаться #6

DO

Dew Oughter in ClickHouse не тормозит

SELECT arrayFilter( i, j -> j <> 0, ['a','b','c','d','e','f','g'], arr)

спасибо большое)

источник

16:37пожаловаться #7

D

Dj in ClickHouse не тормозит

toUInt64()

или так если в 32 бита лезет

  select
Table2.x,
ale_locations.EventTimestamp 
sta_eth_mac
from default.ale_locations
asof join (select
            distinct
            toUInt32(EventTimestamp + 2592000) as x,
            sta_eth_mac
            from default.ale_locations
          ) as Table2 on ale_locations.sta_eth_mac = Table2.sta_eth_mac
                     and Table2.x >= ale_locations.EventTimestamp

источник

16:38пожаловаться #8

DC

Denny Crane (I don't... in ClickHouse не тормозит

Denis Dorozhkin

Всем привет!
Столкнулся со странной проблемой при join distributed таблицы

select 1 as is_local, shard_num from distributed_table all inner join system.clusters using (is_local) where cluster = 'cluster' limit 1 by shard_num

Error running query: Code: 171, e.displayText() = DB::Exception: Cannot convert column `1` because it is non constant in source stream but must be constant in result (version 19.16.14.65 (official build))

Может кто подскажет как переписать чтобы оно завелось?

https://github.com/ClickHouse/ClickHouse/issues/7666

select materialize(1)

источник

17:01пожаловаться #9

DC

Denny Crane (I don't... in ClickHouse не тормозит

Denis Dorozhkin

Всем привет!
Столкнулся со странной проблемой при join distributed таблицы

select 1 as is_local, shard_num from distributed_table all inner join system.clusters using (is_local) where cluster = 'cluster' limit 1 by shard_num

Error running query: Code: 171, e.displayText() = DB::Exception: Cannot convert column `1` because it is non constant in source stream but must be constant in result (version 19.16.14.65 (official build))

Может кто подскажет как переписать чтобы оно завелось?

вообще что хотелось-то? кажется все можно сильно проще сделать

источник

17:02пожаловаться #10

DC

Denny Crane (I don't... in ClickHouse не тормозит

виртуальное поле _shard_num есть

источник

17:02пожаловаться #11

DC

Denny Crane (I don't... in ClickHouse не тормозит

select _shard_num from distributed_table

источник

17:03пожаловаться #12

DC

Denny Crane (I don't... in ClickHouse не тормозит

привет, подскажите пожалуйста как достать из массива элементы, индексы которых лежат в другом массиве? массивы разной длины
например есть массив значений [a,b,c,d,e,f,g] и массив индексов [2,5] как мне из первого массива сделать массив [b,e]?
оба массива у меня числовые

select arrayMap(i-> x[i], y) from (select ['a','b','c','d','e','f','g'] x, [2,5] y)
['b','e']

источник

17:06пожаловаться #13

DC

Denny Crane (I don't... in ClickHouse не тормозит

еще раз повторю "такого запроса не должно быть, индексы массивов не нужны и вредны, все можно сделать без них"

источник

17:06пожаловаться #14

AP

Abi Palagashvili in ClickHouse не тормозит

скажите, а на уже созданную таблицу нельзя навесить TTL правило?

источник

17:07пожаловаться #15

DC

Denny Crane (I don't... in ClickHouse не тормозит

Abi Palagashvili

скажите, а на уже созданную таблицу нельзя навесить TTL правило?

alter table modify ttl

источник

17:14пожаловаться #16

DP

Dmitry Pitik in ClickHouse не тормозит

Abi Palagashvili

скажите, а на уже созданную таблицу нельзя навесить TTL правило?

https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/#table_engine-mergetree-ttl

clickhouse.tech

MergeTree | Документация ClickHouse

MergeTree Движок MergeTree, а также другие движки этого семейства (*MergeTree) — это наиболее функциональные движки табл

источник

17:21пожаловаться #17

AP

Abi Palagashvili in ClickHouse не тормозит

AnimatedSticker.tgs

источник

17:24пожаловаться #18

AK

Andrii Kakoichenko in ClickHouse не тормозит

Пробую лить с питона в CH при помощи https://github.com/mymarilyn/clickhouse-driver
Запросы вида insert into...values, и потом отдельным параметром питоновский объект на 1М строк. Скрипт запущен под виндой.

Получаю перфоманс в 20 раз ниже, чем импортируя csv при помощи clickhouse-client из под линукса. Ни одно ядро при этом не загружено существенно на клиенте.

Стоит ли искать проблемы в коде/работе сети, или это и есть ожидаемый результат.

mymarilyn/clickhouse-driver

ClickHouse Python Driver with native interface support - mymarilyn/clickhouse-driver

источник

17:43пожаловаться #19

S

Slach in ClickHouse не тормозит

Andrii Kakoichenko

Пробую лить с питона в CH при помощи https://github.com/mymarilyn/clickhouse-driver
Запросы вида insert into...values, и потом отдельным параметром питоновский объект на 1М строк. Скрипт запущен под виндой.

Получаю перфоманс в 20 раз ниже, чем импортируя csv при помощи clickhouse-client из под линукса. Ни одно ядро при этом не загружено существенно на клиенте.

Стоит ли искать проблемы в коде/работе сети, или это и есть ожидаемый результат.

mymarilyn/clickhouse-driver

ClickHouse Python Driver with native interface support - mymarilyn/clickhouse-driver

это ожидаемый результат, "питоновский объект" приходится сериализовать и передавать по сети
clickhouse-client из питона + CSV это всегда будет быстрее чем питон

источник

17:44пожаловаться #20