Всем привет!

Имеется конфигурация:
<storage_configuration>
 <disks>
   <hdd>
     <path>/mnt/hdd/clickhouse/</path>
   </hdd>
 </disks>
 <policies>
   <hdd_policy>
     <volumes>
       <hdd_volume>
         <disk>hdd</disk>
       </hdd_volume>
     </volumes>
   </hdd_policy>
 </policies>
</storage_configuration>

При создании такой таблицы:
CREATE TABLE test.t1
(
   EventDate Date,
   Value Int32
)
ENGINE = MergeTree
PARTITION BY toYYYYMM(EventDate)
ORDER BY EventDate
TTL EventDate + INTERVAL 1 MONTH TO DISK 'hdd'
SETTINGS storage_policy='hdd_policy'

Данные пишутся на hdd, как настроить конфиг, что бы новые данные писались на ssd, а спустя месяц по TTL переносились на hdd?

Конфигурация должна быть такая или нет?
<storage_configuration>
 <disks>
   <ssd>
     <path>/mnt/ssd/clickhouse/</path>
   </ssd>
   <hdd>
     <path>/mnt/hdd/clickhouse/</path>
   </hdd>
 </disks>
 <policies>
   <hdd_policy>
     <volumes>
       <ssd_volume>
         <disk>ssd</disk>
       </ssd_volume>
       <hdd_volume>
         <disk>hdd</disk>
       </hdd_volume>
     </volumes>
   </hdd_policy>
 </policies>
</storage_configuration>

его ранее @kshvakov разрабатывал?

вроде идентично

а это?

SELECT * FROM system.zookeeper WHERE path =
 '/clickhouse/tables/1/log/replicas/1' AND name IN ('metadata_version');
...
SELECT * FROM system.zookeeper WHERE path =
 '/clickhouse/tables/1/log/replicas/2' AND name IN ('metadata_version');

всем привет, нужна помощь
есть столбец string, в каждой string - произвольное количество json, минимум 1
я хочу строку распарсить, разбить в массив и работать с каждым элементом массива как с ValidJSON
план такой, что хочу заменить в каждой строке ", " на скажем "|" при условии, что до ", " идёт "}", а после идёт "{", и затем splitByChar
соответственно пытаюсь написать регулярное выражение, чтобы это сматчить, но ничего не работает

replaceRegexpAll(some_string, '(?<=\\}), (?>=\\{)', '|')

что я делаю не так и как сделать правильно ?

есть такая штука JSONAsString оно json-ы в разные строки раскладывает

Ребят, а КХ подходит для хранения и кверинга sorted sets во времени? Лучше всего наверное подходит аналогия с отслеживанием хитов веб-реквестов с примерно миллиардом уникальных посетителей, но мне требуется делать запросы вроде topN пользователей по количеству реквестов за последний месяц, а так же всего уникальных пользоватеоей в месяц.

Насколько жирная машина потребуется для КХ, если всего пользователей 1млрд, а хитов около 500млн в месяц?

Ребят, а КХ подходит для хранения и кверинга sorted sets во времени? Лучше всего наверное подходит аналогия с отслеживанием хитов веб-реквестов с примерно миллиардом уникальных посетителей, но мне требуется делать запросы вроде topN пользователей по количеству реквестов за последний месяц, а так же всего уникальных пользоватеоей в месяц.

Насколько жирная машина потребуется для КХ, если всего пользователей 1млрд, а хитов около 500млн в месяц?

точное число до копейки ведь не нужно ? Можно хранить агрегаты по часу / дню, uniqHLL12State и считать за миллисекунды

Всем привет!
Есть данные статистики netflow в кликхаусе.
┌─evtDate  ─┬─────────time─┬──srcaddr─┬─srcport─┬─dstaddr─┬─dstport─┬evt─┬─proto┐
│ 2019-02-01 │ 2019-02-01 00:00:00 │ 3706411294 │   14918 │ 3285434422 │    6889 │       129 │    17 │
│ 2019-02-01 │ 2019-02-01 00:00:01 │   34643719   │       0       │ 3285434645 │    2048 │        80   │     1  │
Хранится в виде реальных записей netflow.
Хочется свернуть по метке time до 1 минутных интервалов.
То есть при совпадении всех остальных данных нужно в рамках 1ой минуты просуммировать значение evt.
Как это можно сделать?

Всем привет!
Есть данные статистики netflow в кликхаусе.
┌─evtDate  ─┬─────────time─┬──srcaddr─┬─srcport─┬─dstaddr─┬─dstport─┬evt─┬─proto┐
│ 2019-02-01 │ 2019-02-01 00:00:00 │ 3706411294 │   14918 │ 3285434422 │    6889 │       129 │    17 │
│ 2019-02-01 │ 2019-02-01 00:00:01 │   34643719   │       0       │ 3285434645 │    2048 │        80   │     1  │
Хранится в виде реальных записей netflow.
Хочется свернуть по метке time до 1 минутных интервалов.
То есть при совпадении всех остальных данных нужно в рамках 1ой минуты просуммировать значение evt.
Как это можно сделать?

Всем привет!
Подскажите пожалуйста, почему в мат вью с движком ReplacingMergeTree могут не записываться данные?
Уже долгое время пытаюсь отловить этот shadow bug.
Когда ручками пересоздаю мат вью, то данные подтягиваются, а если её оставить на недельку, то некоторые строки не долетают.

@den_crane 🙏