Size: a a a

ClickHouse не тормозит

2020 August 18

DC

Denny Crane (I don't... in ClickHouse не тормозит
N O
Можно ли как то дать название колонкам по дате при группировки?  Вопрос только в наименование самих колонок:
ansi sql  не разрешает неизвестное кол-во колонок, все имена и типы колонок в результате известны еще до выполнения запроса
источник

AK

Andrii Kakoichenko in ClickHouse не тормозит
Artem Zuikov
да, так вы поменяете таблички местами (крупная станет слева и используете индекс через IN), потом поджойните результат asof-ом о small.
Скажите ещё, в таком кейсе пойдёт ли распараллеливание поисков по пк?
источник

SL

Sergey Lossev in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
там в  конфиге из пакета стоит

<!-- Path to folder where users and roles created by SQL commands are stored. -->
   <access_control_path>/var/lib/clickhouse/access/</access_control_path>

нафига вы config.xml меняете?
Да я и не трогаю его. Юзеров только - аксесс добавил
источник

AZ

Artem Zuikov in ClickHouse не тормозит
Andrii Kakoichenko
Скажите ещё, в таком кейсе пойдёт ли распараллеливание поисков по пк?
из MergeTree по индексу читается многопоточно. дальше, если завернуть в подзапрос, уже могут быть эффекты (как в случае с join-ом выше)
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Sergey Lossev
Да я и не трогаю его. Юзеров только - аксесс добавил
а что в config.xml про access_control_path ?
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
А есть в кликхаусе ограничение по количеству строк в таблице?
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
Если мне вот столько надо сформировать? Не знаю как число такое называется
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
1000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000000
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
100^99
источник

DT

Dmitry Titov in ClickHouse не тормозит
если допустить, что 1 строка занимает 1 байт, то у тебя выходит
100^99 байтов, что довольно много, что бы такое число в лоб считать/хранить
источник

DT

Dmitry Titov in ClickHouse не тормозит
Зачем тебе такое число?
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
Dmitry Titov
Зачем тебе такое число?
У меня условно 100 параметров и мне нужно найти все возможные варианты их пересечений и по каждому собранном сегменту делать расчёт
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
А дальше по каждому из сегментов смотреть есть или нет отклонения на заданный процент, но вся проблема в количестве возможных вариантов которые надо просчитать
источник

SC

Smoked Cheese in ClickHouse не тормозит
Прямого ограничения на количество строк нет, но нужно иметь достаточно ресурсов для работы над ними
источник

DT

Dmitry Titov in ClickHouse не тормозит
Михаил Егоров
У меня условно 100 параметров и мне нужно найти все возможные варианты их пересечений и по каждому собранном сегменту делать расчёт
А в каком виде поступают данные?
и сколько их
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
Dmitry Titov
А в каком виде поступают данные?
и сколько их
Данных самих не так много, условно 4 млн товаров, но у каждого есть характеристики, эти характеристики образуют в пересечении такое количество вариантов. Каждый товар может быть в нескольких сегментах. Я хочу понимать как меняется спрос на те или иные товары в разных разрезах
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
это больше чем атомов во вселенной, это займет время большее чем время жизни нашей вселенной причем в невообразимое число раз
источник

T

Tim in ClickHouse не тормозит
Михаил Егоров
Данных самих не так много, условно 4 млн товаров, но у каждого есть характеристики, эти характеристики образуют в пересечении такое количество вариантов. Каждый товар может быть в нескольких сегментах. Я хочу понимать как меняется спрос на те или иные товары в разных разрезах
Ограничтесь или парами или отношением каждой категории к общей какой-то кривой
источник

МЕ

Михаил Егоров... in ClickHouse не тормозит
Т.е. технически не реально такой объем просчитывать каждый день?
источник

T

Tim in ClickHouse не тормозит
просчитывать может и реально, а вот хранить нет
источник