OK
Есть тип Nested, в нем можно сделать key-value пары. Почти те же массивы, но по крайней мере со слабой гарантией консистентности: https://clickhouse.tech/docs/ru/sql-reference/data-types/nested-data-structures/nested/
Size: a a a
2020 June 02
НМ
Привет! Подскажите, есть в Clickhouse возможность ограничения размера таблицы? То есть я могу поставить для таблицы TTL, чтобы ограничить время хранения. А есть ли возможность аналогичной настройки для размера таблицы в гигабайтах?
l
TTL это скорее пожелание, чем ограничение
DC
Привет, подскажите как лучше оргинизовать в Clickhouse хранение событий с разными параметрами? Те у них есть общая часть и у каждого что-то свое. Изначально хотелось положить различающиеся параметры в одно поле в виде json, но Clickhouse, как я понял, не позволяет делать выборки по таким колонкам.
Нашел статью от баду, они хранят ключи и значения в массивах, а потом изгаляются и строят графики: (https://habr.com/ru/company/badoo/blog/442616/). Так принято делать? Или есть более правильные варианты?
Нашел статью от баду, они хранят ключи и значения в массивах, а потом изгаляются и строят графики: (https://habr.com/ru/company/badoo/blog/442616/). Так принято делать? Или есть более правильные варианты?
позволяет, jsonExtract , парсим джейсоны в select, только работает в 1000 раз медленее чем просто колонка
DC
Привет! Подскажите, есть в Clickhouse возможность ограничения размера таблицы? То есть я могу поставить для таблицы TTL, чтобы ограничить время хранения. А есть ли возможность аналогичной настройки для размера таблицы в гигабайтах?
нет такой возможности
AO
позволяет, jsonExtract , парсим джейсоны в select, только работает в 1000 раз медленее чем просто колонка
Ок, а как делать правильно?) Создавать таблицу для каждого события?
DC
есть банальная таблица с (time, http_code, http_path, …)
хочется сделать count по времени и вывести top50 http_path, какие функции у clickhouse могут помочь?
хочется сделать count по времени и вывести top50 http_path, какие функции у clickhouse могут помочь?
что такое "count по времени" ?
select count() с, http_path
...
group by http_path
order by c desc
limit 50
select count() с, http_path
...
group by http_path
order by c desc
limit 50
M
Ребят, привет.
Хотел спросить по поводу алгоритма выполнения функции toStartOfInterval. Может быть кто-нибудь сталкивался.
Обратил внимание, что для третьей недели сбивается группа и возвращается не первый день первой недели.
Первый день первой недели, на сколько понимаю, должен быть 2019-12-30.
Опять-таки, если и вернул 2019-12-23, то почему на следующих вычислениях повторяется возврат той же даты только один раз.
Мне казалось, что правильным бы было вернуть три раза подряд 2019-12-23.
Хотел спросить по поводу алгоритма выполнения функции toStartOfInterval. Может быть кто-нибудь сталкивался.
Обратил внимание, что для третьей недели сбивается группа и возвращается не первый день первой недели.
Первый день первой недели, на сколько понимаю, должен быть 2019-12-30.
Опять-таки, если и вернул 2019-12-23, то почему на следующих вычислениях повторяется возврат той же даты только один раз.
Мне казалось, что правильным бы было вернуть три раза подряд 2019-12-23.
M
Запрос:
select addWeeks(toDateTime('2020-01-02 02:15:22'), number) as dttm,
toInt8(formatDateTime(dttm, '%V')) wn,
toStartOfInterval(dttm, interval 1 week) w1,
toStartOfInterval(dttm, interval 2 week) w2,
toStartOfInterval(dttm, interval 3 week) w3,
toStartOfInterval(dttm, interval 4 week) w4
from numbers(12)
order by dttm
;DC
Ок, а как делать правильно?) Создавать таблицу для каждого события?
просто таблица с 800 колонками, там все события, всех типов
DV
что такое "count по времени" ?
select count() с, http_path
...
group by http_path
order by c desc
limit 50
select count() с, http_path
...
group by http_path
order by c desc
limit 50
count по времени во временном интервале: group by t где t - например округление до минуты/часа/..
DC
count по времени во временном интервале: group by t где t - например округление до минуты/часа/..
и что для каждого часа надо топ50?
select count() с, http_path, toStartOfHour(time) h
...
group by http_path,h
order by h, c desc
limit 50 by h
select count() с, http_path, toStartOfHour(time) h
...
group by http_path,h
order by h, c desc
limit 50 by h
DV
и что для каждого часа надо топ50?
select count() с, http_path, toStartOfHour(time) h
...
group by http_path,h
order by h, c desc
limit 50 by h
select count() с, http_path, toStartOfHour(time) h
...
group by http_path,h
order by h, c desc
limit 50 by h
Ок поясню, строю график по времени. Нужно отсечь рандомный мусор. Сейчас отсекаю через having count > N, хочется весь отсечённый мусор показать как overs
D
Ок поясню, строю график по времени. Нужно отсечь рандомный мусор. Сейчас отсекаю через having count > N, хочется весь отсечённый мусор показать как overs
не подойдет?
group by field1…fieldn with totals
group by field1…fieldn with totals
DC
Ребят, привет.
Хотел спросить по поводу алгоритма выполнения функции toStartOfInterval. Может быть кто-нибудь сталкивался.
Обратил внимание, что для третьей недели сбивается группа и возвращается не первый день первой недели.
Первый день первой недели, на сколько понимаю, должен быть 2019-12-30.
Опять-таки, если и вернул 2019-12-23, то почему на следующих вычислениях повторяется возврат той же даты только один раз.
Мне казалось, что правильным бы было вернуть три раза подряд 2019-12-23.
Хотел спросить по поводу алгоритма выполнения функции toStartOfInterval. Может быть кто-нибудь сталкивался.
Обратил внимание, что для третьей недели сбивается группа и возвращается не первый день первой недели.
Первый день первой недели, на сколько понимаю, должен быть 2019-12-30.
Опять-таки, если и вернул 2019-12-23, то почему на следующих вычислениях повторяется возврат той же даты только один раз.
Мне казалось, что правильным бы было вернуть три раза подряд 2019-12-23.
трехнедельный интервал начался не 30, а 23, все правильно работает
DV
не подойдет?
group by field1…fieldn with totals
group by field1…fieldn with totals
With totals, заценю, спасибо!
DC
Ок поясню, строю график по времени. Нужно отсечь рандомный мусор. Сейчас отсекаю через having count > N, хочется весь отсечённый мусор показать как overs
пипец вы обсъяняете, как будто с инопланетянами общение
нихера не понял
нихера не понял
DV
пипец вы обсъяняете, как будто с инопланетянами общение
нихера не понял
нихера не понял
Сорян, кинул бы sql, но не за ноутом. Спасибо!
M
трехнедельный интервал начался не 30, а 23, все правильно работает
Спасибо.
Получается, что расчет интервалов начинается с 1970 года
Получается, что расчет интервалов начинается с 1970 года
M
поэтому и значения разные могут быть.