В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4219 membersпожаловаться на группу
2020 August 24

A

Artem in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
какая ошибка при инсерте? Не надо пересказывать своими словами, там 3 разных ошибки и вам они кажутся одной и той же но это не (тут мат) так. И какая версия КХ.
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 1.13 GiB (attempt to allocate chunk of 4502600 bytes), maximum: 1.13 GiB (version 20.4.7.67 (official build))
источник
16:21пожаловаться#1

A

Alex in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
ну на миллиарде записей у меня синтетический запрос работал в 100 раз медленее с final
Лучше делать MergeTree и join'ить с изменяющимися данными в ReplacingMergeTree или выбрать для изменяющихся данных MySQL?
источник
16:22пожаловаться#2

DC

Denny Crane (I don't... in ClickHouse не тормозит
Artem
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 1.13 GiB (attempt to allocate chunk of 4502600 bytes), maximum: 1.13 GiB (version 20.4.7.67 (official build))
обновляйте до 20.4.9.110, в вашей версии memory tracking врет, и ошибочно считает total
источник
16:23пожаловаться#3

A

Alex in ClickHouse не тормозит
Artem
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 1.13 GiB (attempt to allocate chunk of 4502600 bytes), maximum: 1.13 GiB (version 20.4.7.67 (official build))
была такая же проблема, обновляйте)
источник
16:24пожаловаться#4

A

Artem in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
обновляйте до 20.4.9.110, в вашей версии memory tracking врет, и ошибочно считает total
Интересно, спасибо.
источник
16:24пожаловаться#5

DC

Denny Crane (I don't... in ClickHouse не тормозит
Alex
Лучше делать MergeTree и join'ить с изменяющимися данными в ReplacingMergeTree или выбрать для изменяющихся данных MySQL?
вы про внешние словари уже все попробовали?
источник
16:24пожаловаться#6

DC

Denny Crane (I don't... in ClickHouse не тормозит
Artem
Code: 241, e.displayText() = DB::Exception: Memory limit (total) exceeded: would use 1.13 GiB (attempt to allocate chunk of 4502600 bytes), maximum: 1.13 GiB (version 20.4.7.67 (official build))
+1ГБ это нереально мало для КХ, вам придется попотеть меняя 10005000 настроек
источник
16:25пожаловаться#7

В

Виталий in ClickHouse не тормозит
Доброго времени суток! Подскажите, пожалуйста, какая сейчас стабильная версия КХ?
источник
16:26пожаловаться#8

~

~ in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
однозначно IPv6
Почему? Только ради правильности или есть ещё причины? Какие-то оптимизации внутри КХ, может?
источник
16:26пожаловаться#9

DC

Denny Crane (I don't... in ClickHouse не тормозит
Виталий
Доброго времени суток! Подскажите, пожалуйста, какая сейчас стабильная версия КХ?
Для меня 18.14.18
источник
16:26пожаловаться#10

A

Artem in ClickHouse не тормозит
На самом деле там вообще 600 МБ на серваке. Но тем интереснее. Сразу все проблемы можно пощупать.
источник
16:26пожаловаться#11

DC

Denny Crane (I don't... in ClickHouse не тормозит
Artem
На самом деле там вообще 600 МБ на серваке. Но тем интереснее. Сразу все проблемы можно пощупать.
изначально КХ написан для серваков у которых было 128ГБ+
источник
16:27пожаловаться#12

A

Artem in ClickHouse не тормозит
Да я в курсе, но ведь работает же.
источник
16:27пожаловаться#13

DC

Denny Crane (I don't... in ClickHouse не тормозит
~
Почему? Только ради правильности или есть ещё причины? Какие-то оптимизации внутри КХ, может?
так быстрее и меньше места занимает на диске
источник
16:27пожаловаться#14

В

Виталий in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Для меня 18.14.18
А среди 20.Х версий есть стабильные?
источник
16:27пожаловаться#15

~

~ in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
так быстрее и меньше места занимает на диске
IPv6 в КХ это FixedString(16), по месту должно быть то же самое. А быстрее - это факт практический или в теории?
источник
16:28пожаловаться#16

DC

Denny Crane (I don't... in ClickHouse не тормозит
Artem
Да я в курсе, но ведь работает же.
есть параметр например mark_cache  по дефолту он равен 5ГБ, что это значит? А значит это что КХ пытается использовать 5ГБ озу для кеша одних только засечек, а там еще всяких кешей 38 штук
источник
16:28пожаловаться#17

A

Artem in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
есть параметр например mark_cache  по дефолту он равен 5ГБ, что это значит? А значит это что КХ пытается использовать 5ГБ озу для кеша одних только засечек, а там еще всяких кешей 38 штук
Да, я читал уже. Но там доказано, что он on demand и не надо его трогать.
источник
16:29пожаловаться#18

DC

Denny Crane (I don't... in ClickHouse не тормозит
~
IPv6 в КХ это FixedString(16), по месту должно быть то же самое. А быстрее - это факт практический или в теории?
по перфомансу это одно и тоже примерно. Просто IPv6 автоматически в строки конвертится

Вот String <> FixedString.
источник
16:30пожаловаться#19

A

Alex in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
вы про внешние словари уже все попробовали?
внешние словари пробовал, не хочется mysql сильно напрягать и скорее может не вытянуть потом : на 1к в MergeThree +-50 записей получается где-то измененных, все таки думаете лучше MySQL выбрать?
источник
16:31пожаловаться#20