Телеграмм чат группы clickhouse_ru страница 9269

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4779 membersпожаловаться на группу

2021 February 11

T

Tatiana in ClickHouse не тормозит

всем привет ! можно ли в КХ сделать вычисляемый столбец на основе значения в другом столбце ? что хочется: у меня есть odbc словарь, я хочу его отобразить в виде таблицы с помощью движка Dictionary. допустим в этом словаре есть ключ id UInt64, и значение value String. я хочу сделать так, чтобы в третьем столбце calculated_value UInt8 было значение if(value='some_value', 1, 0)

Вы можете в словарь добавить еще один атрибут и прописать ему expression.
Expression будет отправляться в запросе на источник

источник

17:10пожаловаться #1

A

Alexey in ClickHouse не тормозит

Как правильнее сделать мат. вьюху для подсчета количества встречаемого Hash (хэш сумма) и списка Path, которые соотвествуют этому хэшу в таблице logs.
Сейчас сделал так:


CREATE MATERIALIZED VIEW

hashes


(
    `Hash` String,
    `Paths` Array(String),
    `Occurrence` Int32,
    `CreatedAt` DateTime,
    `UpdatedAt` DateTime
)
ENGINE = SummingMergeTree(Occurrence)
PARTITION BY toYYYYMM(CreatedAt)
ORDER BY Hash POPULATE AS
SELECT
    PathHash AS Hash,
    groupUniqArray(Path) AS Paths,
    count() AS Occurrence,
    min(EventDate) AS CreatedAt,
    max(EventDate) AS UpdatedAt
FROM logs
GROUP BY Hash

Будут запросы вида


SELECT *
FROM hashes
ORDER BY CreatedAt DESC
LIMIT 10

SELECT *
FROM hashes
ORDER BY Occurrence DESC
LIMIT 10

источник

17:14пожаловаться #2

S

Slach in ClickHouse не тормозит

Рязанский Михаил

Всем привет!
Подскажите плз, как и можно ли вообще сделать аналог SUM(col) Over()
без разворота массивов ( в выборке много столбцов и для нескольких из них придётся разворачивать )
И без джойнов (таблицы жирные)

ждать и молиться
https://github.com/ClickHouse/ClickHouse/issues/18097

window functions: a prototype · Issue #18097 · ClickHouse/ClickHouse

Some thoughts for internal discussion. The main task is here: #1469 What we need for a meaningful prototype: single-threaded, partitioning via sort the only supported frame is ROWS BETWEEN UNBOUNDE...

источник

17:24пожаловаться #3

l

lnuynxa in ClickHouse не тормозит

Простенький Sum уже должен считатся нормально емнип

источник

17:25пожаловаться #4

РМ

Рязанский Михаил... in ClickHouse не тормозит

ждать и молиться
https://github.com/ClickHouse/ClickHouse/issues/18097

window functions: a prototype · Issue #18097 · ClickHouse/ClickHouse

Some thoughts for internal discussion. The main task is here: #1469 What we need for a meaningful prototype: single-threaded, partitioning via sort the only supported frame is ROWS BETWEEN UNBOUNDE...

источник

17:35пожаловаться #5

AN

Andrey Nikulin in ClickHouse не тормозит

Это для одного параметра, а для нескольких?

В лоб у меня получился вот такой монстр:

select
  id
from
  TestTable
    array join params
where
  (params.name, params.value) in (('param1', 'val1'), ('params2', 'val2'))
group by
  id
having 
  count()  > 1

Второй пример я сделал так:

select
  (params.name, params.value) as p
  , groupArray(id)
from
  TestTable
group by
  p
having
  uniq(id) > 0

Но мне оба решения не нравятся, наверняка это можно сделать проще и быстрее.

Первое можно вот так, например
where arrayElement(params.value, indexOf(params.name, 'param1')) = 'val1'

источник

17:45пожаловаться #6

AS

Alexey Sokolov in ClickHouse не тормозит

Первое можно вот так, например
where arrayElement(params.value, indexOf(params.name, 'param1')) = 'val1'

Спасибо, попробую.

Я ещё вот такой вариант придумал:

where hasAll(arrayZip(param.name, param.value), [('param1', 'val1'), ('param2', 'val2')]) = 1

источник

17:56пожаловаться #7

AE

Asen Erden in ClickHouse не тормозит

Code: 537. DB::Exception: Received from localhost:9000. DB::Exception: Illegal MySQL variables, the MaterializeMySQL engine requires default_authentication_plugin='mysql_native_password'.

источник

18:05пожаловаться #8

AE

Asen Erden in ClickHouse не тормозит

добрый вечер! как можно исправить это ошибку

источник

18:06пожаловаться #9

AE

Asen Erden in ClickHouse не тормозит

?

источник

18:06пожаловаться #10

AE

Asen Erden in ClickHouse не тормозит

можете подсказать

источник

18:06пожаловаться #11

НЧ

Николай Чернов... in ClickHouse не тормозит

А подскажите, пожалуйста, может есть в КХ какая-то функция, что-то типа arrayForEach, в которую можно передать лямбду и массив и что-то там сделать с элементами массива?

источник

18:18пожаловаться #12

S

Slach in ClickHouse не тормозит

Николай Чернов

А подскажите, пожалуйста, может есть в КХ какая-то функция, что-то типа arrayForEach, в которую можно передать лямбду и массив и что-то там сделать с элементами массива?

лямбды есть =) для многих array фукнций
https://clickhouse.tech/docs/en/sql-reference/functions/#higher-order-functions

clickhouse.tech

Introduction | ClickHouse Documentation

Functions There are at least* two types of functions - regular functions (they are just called “functions”) and aggregat

источник

18:19пожаловаться #13

M

Mishanya in ClickHouse не тормозит

Николай Чернов

А подскажите, пожалуйста, может есть в КХ какая-то функция, что-то типа arrayForEach, в которую можно передать лямбду и массив и что-то там сделать с элементами массива?

https://clickhouse.tech/docs/ru/sql-reference/functions/array-functions/#array-map

clickhouse.tech

Массивы | Документация ClickHouse

Массивы empty Возвращает 1 для пустого массива, и 0 для непустого массива. Тип результата - UInt8. Функция также работае

источник

18:19пожаловаться #14

НЧ

Николай Чернов... in ClickHouse не тормозит

https://clickhouse.tech/docs/ru/sql-reference/functions/array-functions/#array-map

clickhouse.tech

Массивы | Документация ClickHouse

Массивы empty Возвращает 1 для пустого массива, и 0 для непустого массива. Тип результата - UInt8. Функция также работае

Да, что-то я не подумал про arrayMap. Спасибо.

источник

18:23пожаловаться #15

SP

Sergey Platonov in ClickHouse не тормозит

почему конструкция FROM table a, table b ест на порядки больше памяти чем в таблицах данных?

источник

18:42пожаловаться #16

SP

Sergey Platonov in ClickHouse не тормозит

по условиям сравнения там всего х3 должно быть

источник

18:43пожаловаться #17

DT

Dmitry Titov in ClickHouse не тормозит

Sergey Platonov

почему конструкция FROM table a, table b ест на порядки больше памяти чем в таблицах данных?

CROSS JOIN же
a*b

источник

18:44пожаловаться #18

DT

Dmitry Titov in ClickHouse не тормозит

А какие конкретно условия?
кх в некоторых случаях не может оптимизировать это в INNER JOIN

источник

18:44пожаловаться #19

РМ

Рязанский Михаил... in ClickHouse не тормозит

CROSS JOIN же
a*b

+

источник

18:45пожаловаться #20