Телеграмм чат группы clickhouse_ru страница 7503

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

3960 membersпожаловаться на группу

2020 June 04

D

Dj in ClickHouse не тормозит

это не совсем транзакционность имхо, просто консистентность разных ORDER BY
И одна таблица выглядит гораздо проще чем две таблицы и MV между них для каких то изменений
А еще нужно объяснять как этим пользоваться программистам

про МВ между них речи не шло.
консистентность order by будет разменом на гибкость и усложнением merge-tree.
кмк лучше иметь возможность гибко настраивать таблицы с этими разными order by... кому надо - будет атомик инсерт делать (вставить либо везде успешно, либо никуда)

источник

19:43пожаловаться #1

DC

Denny Crane (I don't... in ClickHouse не тормозит

у нас бекэнд угадывает куда ходить, типа есть агрегаты A,B,C,D, факты X,Y,Z , бекенд перебирает по очереди и ищет где есть все метрики и дименшины, и пишет sql куда надо

источник

19:44пожаловаться #2

DT

Dmitry Titov in ClickHouse не тормозит

Denny Crane (I don't work at Yandex (never did))

у нас бекэнд угадывает куда ходить, типа есть агрегаты A,B,C,D, факты X,Y,Z , бекенд перебирает по очереди и ищет где есть все метрики и дименшины, и пишет sql куда надо

сурово

источник

19:45пожаловаться #3

ЕА

Егор Андреевич... in ClickHouse не тормозит

Добрый вечер,
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 7.00 GiB (attempt to allocate chunk of 4502712 bytes), maximum: 7.00 GiB (version 20.3.10.75 (official build))
Начали сыпаться при записи небольших чанков. Пару недель все ок было.
Мониторинг в Я.Облаке для сервиса ничего подозрительного.
Не подскажете плз в чем проблема?

у нас подобная была штука, и проблема заключалась в том, что с какого-то момента выросли http соединения и судя по всему они не закрывались, а кликхаус не высвобождает память пока соединение на закроется

источник

19:45пожаловаться #4

S

Sergei in ClickHouse не тормозит

Да, ~20% больше обычного

источник

19:45пожаловаться #5

S

Sergei in ClickHouse не тормозит

Егор Андреевич

у нас подобная была штука, и проблема заключалась в том, что с какого-то момента выросли http соединения и судя по всему они не закрывались, а кликхаус не высвобождает память пока соединение на закроется

Спасибо!

источник

19:46пожаловаться #6

DC

Denny Crane (I don't... in ClickHouse не тормозит

Добрый вечер,
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 7.00 GiB (attempt to allocate chunk of 4502712 bytes), maximum: 7.00 GiB (version 20.3.10.75 (official build))
Начали сыпаться при записи небольших чанков. Пару недель все ок было.
Мониторинг в Я.Облаке для сервиса ничего подозрительного.
Не подскажете плз в чем проблема?

это из-за фичи max_server_memory_usage_to_ram_ratio

https://github.com/ClickHouse/ClickHouse/issues/11153#issuecomment-633212510

источник

19:46пожаловаться #7

DC

Denny Crane (I don't... in ClickHouse не тормозит

в облаке саппорт по объявлениям в маршрутках набирают? Меня возьмите, я способный.

источник

19:48пожаловаться #8

DT

Dmitry Titov in ClickHouse не тормозит

про МВ между них речи не шло.
консистентность order by будет разменом на гибкость и усложнением merge-tree.
кмк лучше иметь возможность гибко настраивать таблицы с этими разными order by... кому надо - будет атомик инсерт делать (вставить либо везде успешно, либо никуда)

Ну мне допустим нужен только различный ORDER BY
И я был бы рад если бы эта фича появилась ;)

источник

19:48пожаловаться #9

DT

Dmitry Titov in ClickHouse не тормозит

где нужны разные агрегаты буду дальше пользоваться MV

источник

19:48пожаловаться #10

D

Dj in ClickHouse не тормозит

Denny Crane (I don't work at Yandex (never did))

у нас бекэнд угадывает куда ходить, типа есть агрегаты A,B,C,D, факты X,Y,Z , бекенд перебирает по очереди и ищет где есть все метрики и дименшины, и пишет sql куда надо

ну вот вы сами сделали навороченный supermerge engine =)

источник

19:49пожаловаться #11

ЕА

Егор Андреевич... in ClickHouse не тормозит

Denny Crane (I don't work at Yandex (never did))

в облаке саппорт по объявлениям в маршрутках набирают? Меня возьмите, я способный.

в облаке саппорт отвечает "читайте документацию, мы хз", ты тут гораздо ценнее

источник

19:49пожаловаться #12

DT

Dmitry Titov in ClickHouse не тормозит

ну вот вы сами сделали навороченный supermerge engine =)

построенный на эксепшенах, я правильно же понял ?)

источник

19:49пожаловаться #13

DC

Denny Crane (I don't... in ClickHouse не тормозит

ну вот вы сами сделали навороченный supermerge engine =)

кстати сделано 10 лет назад, для вертики или еще mysql даже

источник

19:49пожаловаться #14

S

Sergei in ClickHouse не тормозит

Denny Crane (I don't work at Yandex (never did))

это из-за фичи max_server_memory_usage_to_ram_ratio

https://github.com/ClickHouse/ClickHouse/issues/11153#issuecomment-633212510

Спасибо! Буду чанки увеличивать, похоже много соединений и часто пишу.

источник

19:50пожаловаться #15

DC

Denny Crane (I don't... in ClickHouse не тормозит

в вертике тоже агрегаты суммирующие (типа summingMT) которые не сделать проекциями

источник

19:50пожаловаться #16

DC

Denny Crane (I don't... in ClickHouse не тормозит

кстати щаз у нас еще смешнее, если в вертике таких дименшинов нет, бекэнд идет автоматически в КХ

источник

19:51пожаловаться #17

D

Dj in ClickHouse не тормозит

построенный на эксепшенах, я правильно же понял ?)

почему? на правилах... если то - иди туда, если сё - иди сюда...

источник

19:52пожаловаться #18

D

Dj in ClickHouse не тормозит

я к тому, что если делать это поверх таблиц отдельным engine-ом - это позволит не усложнять merge-tree

источник

19:53пожаловаться #19

DT

Dmitry Titov in ClickHouse не тормозит

почему? на правилах... если то - иди туда, если сё - иди сюда...

>перебирает по очереди
ну я это понял буквально просто, возможно ошибаюсь

источник

19:53пожаловаться #20