Да это вроде ж очевидно, много полей не есть гуд

1к полей:
- 1к*2+ файловых дескрипторов на каждый инсерт (это если все в одну партицию, иначе еще веселее)
- 1к*2+ файловых дескрипторов, которые нужно трогать, если делаются запросы на *
- нужно трогать большее количество файлов во время мержей и тд.

все зависит, нормально ли вам с этим жить или нет)

понятно, спасибо)

10к это много. Рекомендуется до 1000. Но все засисит от того сколько у вас оперативки и nvme или hdd. Потому что при инсерте будет создаваться 20тыс файлов и исользоваться 20-40гб. Я бы использовал массивы.

attach partition from
insert select

> массивы
поля внутри Nested()?

Nested -- это сахар который работает и имеет значение только в момент парсинга create table

Nested ==== array

всем привет, а не подскажите почему не дает создать view? ((
create view v_test_bets_stats as
select skill.user_id,
      skill.game_id,
      sum(skill.bonus_count_bet_50_100)    bonus_count_bet_50_100,
      sum(skill.bonus_count_bet_above_100) bonus_count_bet_above_100,
      sum(skill.cash_count_bet_50_100)     cash_count_bet_50_100,
      sum(skill.cash_count_bet_above_100)  cash_count_bet_above_100,
      sum(skill.bonus_count)               bonus_count,
      sum(skill.cash_count)                cash_count
from (
        select 'Last 7 Game Days'                                                 type,
               ts.user_id,
               ts.game_id,
               case
                   when ts.is_cashbet = 0 and ts.cost >= 5000 and ts.cost < 10000 then 1
                   else 0 end                                                     bonus_count_bet_50_100,
               case when ts.is_cashbet = 0 and ts.cost >= 10000 then 1 else 0 end bonus_count_bet_above_100,
               case
                   when ts.is_cashbet = 1 and ts.cost >= 5000 and ts.cost < 10000 then 1
                   else 0 end                                                     cash_count_bet_50_100,
               case when ts.is_cashbet = 1 and ts.cost >= 10000 then 1 else 0 end cash_count_bet_above_100,
               case when ts.is_cashbet = 0 then 1 else 0 end                      bonus_count,
               case when ts.is_cashbet = 1 then 1 else 0 end                      cash_count
        from tickets_sold ts
        where today() - ts.date + 1/*include current day*/ <= 7
        ) skill
group by skill.user_id, skill.game_id

toStartOfMinute

Народ, ttl_only_drop_parts должен был удалить пустые парты, правильно ?
Данные удалились после over TTL, а пустые парты остались

create table  temp.temp_ttl_partition_test
(
       rec_date DateTime,
       user_id String
)
engine = MergeTree
partition by formatDateTime(rec_date, '%Y%m%d%H')
ORDER BY user_id
TTL rec_date + interval 10 minute
SETTINGS ttl_only_drop_parts=1;

где неправильно делаю ?

(SelectExecutor): Selected 24 parts by date, 24 parts by key, 2233 marks to read from 2167 ranges
(SelectExecutor): Reading approx. 571648 rows with 4 streams

By date -- читайте by partition -- это кусок кода 4х летней давности , когда кх умел партиционирование только дате/месяцу

Принял, спасибо!

После инсерта парт реплицируется некоторе время 1-5сек. Если сервер упадет в течении этих сек, то возможно парт будет потерян потому что он не записан на диск линуксом.

Добрый день всем!
Какой движок советуете для таблицы балансов? Ситуация у меня такая:
Такие манипуляции делаем с таблицой балансов:
1) Зачисляем баланс - insert в таблицу с положительной суммой
2) Отменяем зачисление - insert в таблицу с отрицательной суммой
3) Получаем баланс (с критериями или без)
При этом не нужно удалять ничего, имею ввиду Collapsing или Replacing - нужна история (история каждой транзакции)
у меня в данный момент такая проблема: не могу контролировать дубликаты. Постгрес или другие строчные СУБДы не подходят так как в текущей системе с задержкой получаем баланс партнера.

Создать временную таблицу и копировать уникальные данные туда как-то не понравилось - в интернете нашел такие варианты

Принял. Это новояз какой-то что-ли? Положительная коннотация?

Документация тоже опенсоурс. На что хватило сил у пользователей кх то они и описали.

Вот я уже сверил этот платеж, теперь баланс провайдера больше на 10 сомони

Такие операции как зачисление и отменение одной транзакции несколько раз допустимы

А зачем в pg вычислять баланс по истории? Просто апдейтами в таблице балансов/счетов. Одна строка.