K
Просто программируя на JS такое чувство что убью столько же времени чем найду запрос как это сделать
Size: a a a
2020 June 03
DC
Блин. Я для отчёта выбираю события в несколько массивов по каждому юзеру по которым потом бегаю вычисляя нужные значениия. Получается каждый раз как я использую фильтерс и каунт у меня делается копия массивов. Понятно откуда у меня потребление в 250 гигов на один день. Что-то я как-то даже и не знаю что делать.
Можно регулировать max_block_size или запрос переписать
EK
Я вот как раз думаю как переписать запрос, да. И что-то ничего не могу придумать
DT
Граница бакетов от 0 до price по которому идет выборка
0|123456|price
0|12|34|56|price
все таки?
0|12|34|56|price
все таки?
DC
Граница бакетов от 0 до price по которому идет выборка
Просто в колонках sumIf(a>3 and a<5), sumIf(a>=5 ...
DT
K
Просто в колонках sumIf(a>3 and a<5), sumIf(a>=5 ...
Это не подходит ибо значение не фиксированное для выборки ,оно равно price'у по которому идет выборка, грубо говоря countIf(price <= priceSelect)
DT
Это не подходит ибо значение не фиксированное для выборки ,оно равно price'у по которому идет выборка, грубо говоря countIf(price <= priceSelect)
ну так и подставляй в запросе?
K
Ну она лжет мне вроде как ...
SELECT price as priceSelect,
countIf(price <= priceSelect) as x
FROM x
GROUP BY price
ORDER BY price DESC LIMIT 10
┌─priceSelect─┬───x─┐
│ 0.216 │ 12 │
│ 0.1975 │ 39 │
│ 0.1792 │ 372 │
│ 0.175 │ 94 │
│ 0.15984 │ 1 │
│ 0.158 │ 28 │
│ 0.155 │ 6 │
│ 0.154 │ 31 │
│ 0.153 │ 1 │
│ 0.152 │ 12 │
└─────────────┴─────┘
K
ну так и подставляй в запросе?
X ведь только уменьшатся должен
IR
Добрый день.
Можно удалять партиции напрямую через распределенную таблицу? Или надо по отдельности обращаться к каждому шарду?
Можно удалять партиции напрямую через распределенную таблицу? Или надо по отдельности обращаться к каждому шарду?
DT
Ну она лжет мне вроде как ...
SELECT price as priceSelect,
countIf(price <= priceSelect) as x
FROM x
GROUP BY price
ORDER BY price DESC LIMIT 10
┌─priceSelect─┬───x─┐
│ 0.216 │ 12 │
│ 0.1975 │ 39 │
│ 0.1792 │ 372 │
│ 0.175 │ 94 │
│ 0.15984 │ 1 │
│ 0.158 │ 28 │
│ 0.155 │ 6 │
│ 0.154 │ 31 │
│ 0.153 │ 1 │
│ 0.152 │ 12 │
└─────────────┴─────┘
вот с примерном стало яснее.
DT
у тебя много различных цен?
DC
Добрый день.
Можно удалять партиции напрямую через распределенную таблицу? Или надо по отдельности обращаться к каждому шарду?
Можно удалять партиции напрямую через распределенную таблицу? Или надо по отдельности обращаться к каждому шарду?
К каждому шарду. Или on cluster
K
очень
DT
это можно через arrayJoin сделать, либо через массивы
DT
нарастающая сумма тебе нужна?
K
нарастающая сумма тебе нужна?
да
DT
очень
много сколько?
K
много сколько?
SELECT count() FROM (
SELECT DISTINCT price FROM table WHERE stats_day= today()
)
┌─count()─┐
│ 22506 │
└─────────┘