В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

5047 membersпожаловаться на группу
2021 March 23

y

yaroslav in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
можно. Есть промежуточный уровень домерживания комбинатор -State.
просто во второй вью пишете AvgMergeState

в 99.99% люди которые задают этот вопрос уже сделали что-то неправильно, потому что обычно все в 100 раз проще.
Задача: считать среднюю длительность (max(click_time) - min(click_time) в рамках одного визита) визитов по странам. То есть 2 уровня группировки: сначала по стране и сессии, затем уже по стране
источник
16:28пожаловаться#1

DC

Denny Crane [not a Y... in ClickHouse не тормозит
yaroslav
Задача: считать среднюю длительность (max(click_time) - min(click_time) в рамках одного визита) визитов по странам. То есть 2 уровня группировки: сначала по стране и сессии, затем уже по стране
эм. Так MV даже первый уровень не сможет посчитать для (max(click_time) - min(click_time)
источник
16:30пожаловаться#2

y

yaroslav in ClickHouse не тормозит
select country_name, session_id, max(visit_time) - min(visit_time) duration
from clicks
group by country_name, session_id

А затем уже select country_name, avg(duration) ... group by country_name
источник
16:32пожаловаться#3

DC

Denny Crane [not a Y... in ClickHouse не тормозит
yaroslav
select country_name, session_id, max(visit_time) - min(visit_time) duration
from clicks
group by country_name, session_id

А затем уже select country_name, avg(duration) ... group by country_name
вы на примере из 2х инсертов проверьте свою идею. Это не может работать
источник
16:33пожаловаться#4

DC

Denny Crane [not a Y... in ClickHouse не тормозит
MV никогда не читает таблицу, оно читает буфер инсерта
источник
16:34пожаловаться#5

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Но в принципе я даже вижу как это навертеть через ttl_groupby, богатая все таки была идея у автора ttl_groupby, жаль он все бросил на 95%
источник
16:35пожаловаться#6

SD

Sergey Davidenko in ClickHouse не тормозит
Господа помогите. Проблема была создана таблица с такой штукой 
 PARTITION BY (eventDate, eventTypeId)  
что привело к генерации огромного количества партиций. Пытался через clickhouse-copier перезалить в другую таблицу с партицированием по дате. В результате clickhouse-copie зависает не может приконектится к clickhouse. Подскажите какие есть варианты еще перелить данные?
источник
16:39пожаловаться#7

M

Mishanya in ClickHouse не тормозит
Sergey Davidenko
Господа помогите. Проблема была создана таблица с такой штукой 
 PARTITION BY (eventDate, eventTypeId)  
что привело к генерации огромного количества партиций. Пытался через clickhouse-copier перезалить в другую таблицу с партицированием по дате. В результате clickhouse-copie зависает не может приконектится к clickhouse. Подскажите какие есть варианты еще перелить данные?
я создавал новую таблицу и просто инсерт селект
источник
16:40пожаловаться#8

ПБ

Повелитель Бури... in ClickHouse не тормозит
Добрый день!
SELECT count(*) FROM s3('x.parquet', 'Parquet', 'column1 String')   отжирает всю память и падает, он все на 1 ноду тащит? да )
источник
16:48пожаловаться#9

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Alex Ryndin
думаю то что надо. Казалось что sql должен такое предоставлять более красиво
есть вариант с values как в PG, но там будет длинее, потому что надо типы данных писать
источник
16:49пожаловаться#10

AR

Alex Ryndin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
есть вариант с values как в PG, но там будет длинее, потому что надо типы данных писать
спасибо, решил через массив сделать
источник
16:50пожаловаться#11

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Повелитель Бури
Добрый день!
SELECT count(*) FROM s3('x.parquet', 'Parquet', 'column1 String')   отжирает всю память и падает, он все на 1 ноду тащит? да )
да
источник
16:51пожаловаться#12

ПБ

Повелитель Бури... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
да
Писать в ch придется?
источник
16:52пожаловаться#13

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Повелитель Бури
Писать в ch придется?
паркет вообще поддерживается на отвали, я отвечу так: "КХ не умеет паркет".
источник
16:53пожаловаться#14

ПБ

Повелитель Бури... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
паркет вообще поддерживается на отвали, я отвечу так: "КХ не умеет паркет".
там можно в авро, csv если это что то поменяет )
источник
16:54пожаловаться#15

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Повелитель Бури
там можно в авро, csv если это что то поменяет )
ну CSV работает, авро конечно тоже нет
источник
16:55пожаловаться#16

ПБ

Повелитель Бури... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
ну CSV работает, авро конечно тоже нет
а что в нем работает, что не работает в паркете? в доке что-то написано?
источник
16:59пожаловаться#17

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Повелитель Бури
а что в нем работает, что не работает в паркете? в доке что-то написано?
в нем работает все, в паркете не работает ничего
источник
16:59пожаловаться#18

АР

Андрей Радченко... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
понимает 

printf "a^b\n" | clickhouse-local --input-format CSV --format_csv_delimiter="^" --query="SELECT * FROM table"  --structure='a String, b String'
a b
Какой бы делимитер я не передал консольному клиенту, оно выдает эту ошибку. Гуишные клиенты грузят без ошибок, но долго. ЧЯДНТ?
источник
17:00пожаловаться#19

ПБ

Повелитель Бури... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
в нем работает все, в паркете не работает ничего
Спасибо! 😁
источник
17:00пожаловаться#20