Size: a a a

ClickHouse не тормозит

2021 March 03

M

Mishanya in ClickHouse не тормозит
ща подумаю))
источник

M

Mishanya in ClickHouse не тормозит
я понял  идею. спасибо)
источник

DT

Dmitry Titov in ClickHouse не тормозит
Mishanya
что значит max_possible_time ? timestamp записи ? если да, то он растет пропрционально now() и в зависимости от того, когда эта запись попадет в кх, будет разный ver для одной и той же записи
>что значит max_possible_time ?

4102434000 - toUInt32(now())
источник

DT

Dmitry Titov in ClickHouse не тормозит
просто какое то время в будущем
источник

M

Mishanya in ClickHouse не тормозит
не костыль ли это ?
источник

M

Mishanya in ClickHouse не тормозит
или это нормальный подход ?
источник

DT

Dmitry Titov in ClickHouse не тормозит
Mishanya
или это нормальный подход ?
Люди пользуются
источник

M

Mishanya in ClickHouse не тормозит
Спасибо, буду пробовать!) @vvvjhaq @unamedrus
источник

GS

Gleb Sologub in ClickHouse не тормозит
Всем привет)
У нас тут открылась вакансия дата-инженера в Яндекс.Практикум https://yandex.ru/jobs/vacancies/dev/data_eng_pract/
Нужно будет работать с ClickHouse over YT.
Удалёнка плюс возможность приходить работать из наших коворкингов в Мск и Спб.
Подробности можно напрямую спросить у хеда аналитики @chuvilinaann
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Gleb Sologub
Всем привет)
У нас тут открылась вакансия дата-инженера в Яндекс.Практикум https://yandex.ru/jobs/vacancies/dev/data_eng_pract/
Нужно будет работать с ClickHouse over YT.
Удалёнка плюс возможность приходить работать из наших коворкингов в Мск и Спб.
Подробности можно напрямую спросить у хеда аналитики @chuvilinaann
а как же армия ваших аналитиков?
источник

GS

Gleb Sologub in ClickHouse не тормозит
Вот чтобы армия аналитиков более эффективно работала, нужен хороший дата-инженер
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Gleb Sologub
Вот чтобы армия аналитиков более эффективно работала, нужен хороший дата-инженер
лол) это был троллинг того что ваши студенты в графу работы пишут Яндекс.Практикум))
источник

GS

Gleb Sologub in ClickHouse не тормозит
а, не, у нас есть своя команда аналитики 10+ человек
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Gleb Sologub
а, не, у нас есть своя команда аналитики 10+ человек
да я понимаю что у вас не армия там)
источник

ИМ

Илья Максимов... in ClickHouse не тормозит
Привет! Создал Replicated таблицу в новой базе, потом дропнул, чтобы пересоздать с другим PARTITION BY, но в результате ловлю Existing table metadata in ZooKeeper differs. Когда из зукипера удалится информация со старой структурой таблицы? Я могу и сам пойти в зукипер удалить директорию, но это как то костыльно звучит. Есть тру вей?
источник

R

Roman in ClickHouse не тормозит
Mishanya
здравствуйте
есть такой вопросик

у меня есь какие-от евенты, которые имеют статус
event_id, user_id, status
1 1 success
2 1 fail
3 1 success
….

Можно ли как-то сделать табличку, что бы считать только первый success евент для каждого user_id ? аля  where status = ‘success’ order by event_id limit 1 by user_id
а так не пробовали?
select user_id, min(event_id) from ... where status = 'success' group by user_id
или
select user_id, minIf(event_id, status = 'success') from ... group by user_id
источник

M

Mishanya in ClickHouse не тормозит
Roman
а так не пробовали?
select user_id, min(event_id) from ... where status = 'success' group by user_id
или
select user_id, minIf(event_id, status = 'success') from ... group by user_id
дак оно-то работает, но данных много обрабатывать. Хочется как-то меньше
источник

R

Roman in ClickHouse не тормозит
Mishanya
дак оно-то работает, но данных много обрабатывать. Хочется как-то меньше
тогда можно сделать materialized view, хранить там текущий state по user_id и доагрегировать запросом minMerge
https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/aggregatingmergetree/
https://clickhouse.tech/docs/ru/sql-reference/aggregate-functions/combinators/#state
источник

M

Mishanya in ClickHouse не тормозит
о, я что-то совсем забыл про такое
источник

M

Mishanya in ClickHouse не тормозит
спассибо! попробую
источник