i
у вас КХ строчит ошибки в лог гигабайтами, покажите их, желательно весь /var/log/clickhouse-server/clickhouse-server.log выложить куда-нибудь
ЛС
Size: a a a
2021 March 23
SD
Привет! Ребят, а есть курсоры в кх? насколько показал беглый поиск нет? Тогда второй вопрос, можно ли доверять получаемым данным из кх без сортировки, что они придут в отсортированном виде, при условии, что запрашиваешь по индексу? куда смотреть?
DC
Привет! Ребят, а есть курсоры в кх? насколько показал беглый поиск нет? Тогда второй вопрос, можно ли доверять получаемым данным из кх без сортировки, что они придут в отсортированном виде, при условии, что запрашиваешь по индексу? куда смотреть?
а какая связь между курсорами и сортировкой?
нет курсоров нет.
>можно ли доверять получаемым данным из кх без сортировки
нет, нельзя, 100% будут в рандомном порядке. На самом деле в mysql тоже нельзя
нет курсоров нет.
>можно ли доверять получаемым данным из кх без сортировки
нет, нельзя, 100% будут в рандомном порядке. На самом деле в mysql тоже нельзя
DC
давно работает optimize_in_order поэтому проблемы нет
SD
супер, спасибо
DL
могут быть join и array join в одном запросе?
DC
могут быть join и array join в одном запросе?
да
DL
круто!
DC
select aa, b from (select [1,2] a) t array join a as aa left join (select 1 aa, 'x' b) s on s.aa = t.aa;
┌─aa─┬─b─┐
│ 1 │ x │
│ 2 │ │
└────┴───┘
DL
а последовательность выполнения в порядке написания? или в другом порядке не написать?
3
DL
про то что функция выполнится после я знаю, но у меня есть ещё group by и нужно JOIN -> ARRAY JOIN - > GROUP BY (функция по моим проверкам выполнялась после group by...)
DC
а последовательность выполнения в порядке написания? или в другом порядке не написать?
сначала array join
DC
про то что функция выполнится после я знаю, но у меня есть ещё group by и нужно JOIN -> ARRAY JOIN - > GROUP BY (функция по моим проверкам выполнялась после group by...)
нет, не может быть
DC
можно () сделать любой порядок, проблема в том что запрос будет на инициаторе выполняться
2021 March 24
AS
Можно ли в КХ как-то убрать дупликаты повторяющихся значений во временном ряду? Или, может, есть какие-нибудь воркэраунды?
DC
Можно ли в КХ как-то убрать дупликаты повторяющихся значений во временном ряду? Или, может, есть какие-нибудь воркэраунды?
да.
разово?
пример есть? таблица какая ? движок? версия КХ ?
разово?
пример есть? таблица какая ? движок? версия КХ ?
AS
Речь идет про выборку, а не про оптимизацию таблицы. Как я себе это представляю: это нужно сделать в виде матвью, и разгребать "на лету". Потому что данных — миллиарды строк (рыночные данные), а после такой обработки должны остаться десятки-сотни тысяч.
Пример (для простоты время тут в виде целых чисел):
Пример (для простоты время тут в виде целых чисел):
t vВ выборке хочу получить
1 1
2 1
3 1
4 2
5 2
6 3
7 1
8 1
9 5
t v
1 1
4 2
6 3
7 1
9 5
Лежат изначальные данные в MergeTree-таблице. Версия 21.3 в облаке Яндекса.DC
Речь идет про выборку, а не про оптимизацию таблицы. Как я себе это представляю: это нужно сделать в виде матвью, и разгребать "на лету". Потому что данных — миллиарды строк (рыночные данные), а после такой обработки должны остаться десятки-сотни тысяч.
Пример (для простоты время тут в виде целых чисел):
Пример (для простоты время тут в виде целых чисел):
t vВ выборке хочу получить
1 1
2 1
3 1
4 2
5 2
6 3
7 1
8 1
9 5
t v
1 1
4 2
6 3
7 1
9 5
Лежат изначальные данные в MergeTree-таблице. Версия 21.3 в облаке Яндекса.так просто replacingMT order by (t,v)
DT
Так задача состоит в том, что бы писать в таблицу только когда произошло изменение, а эта задача красивым образом в кх уже не решает.
Как я понял вопрос
Как я понял вопрос