В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4123 membersпожаловаться на группу
2020 July 29

VB

Vladimir Bunchuk in ClickHouse не тормозит
Dimitriy Scherbenko
больше партиция = меньше места?
опишу наш кейс
табличка на 10ки миллиардов записей
партиции помесячные (toYYYYMM(datetime))
ORDER BY (date, operation)
поле operation — строка, у которой очень много уникальных значений. До 2к+
если оно присутсвует в ключе сортировки, то коэфициент сжатия — примерно 5.
Если его убрать — то примерно 3.5
источник
17:30пожаловаться#1

DS

Dimitriy Scherbenko in ClickHouse не тормозит
Спасибо!
источник
17:31пожаловаться#2

DC

Denny Crane (I don't... in ClickHouse не тормозит
Kos
max_server_memory_usage поставить 80 гигабайт ?? хм, а почему так?
я спросил какая у вас версия, вы не ответили.
я сказал баг возможно в аккаунтинге, ну считает неправильно, считает что расход 100 ГБ, а на самом деле расход 2. Ну и ставят в этом случае max_server_memory_usage 8000000000 гигабайт
источник
17:32пожаловаться#3

DC

Denny Crane (I don't... in ClickHouse не тормозит
Evgeny Kruglov (work)
Подскажите, а в настройках внешних словарей через файлы можно указывать пароли через енв переменную?
да, from_env
источник
17:33пожаловаться#4

K

Kos in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
я спросил какая у вас версия, вы не ответили.
я сказал баг возможно в аккаунтинге, ну считает неправильно, считает что расход 100 ГБ, а на самом деле расход 2. Ну и ставят в этом случае max_server_memory_usage 8000000000 гигабайт
я следующим сообщением написал версия  20.5.3.27.
поставил значение
<max_server_memory_usage_to_ram_ratio>10</max_server_memory_usage_to_ram_ratio>
<max_server_memory_usage>0</max_server_memory_usage>
источник
17:34пожаловаться#5

IR

Iaroslav Romanov in ClickHouse не тормозит
Переслано от Iaroslav Romanov
Привет! Используя clickhouse, я столкнулся с необъяснимым. В принципе на скриншотах уже должно быть понятно, но на всякий случай длинный комментарий:


Есть две таблицы: в dt0 поле tag заполнено, в dt1 tag пустое. Делаю GLOBAL ANY FULL JOIN по publisherMongoId.
При наличии COALESCE(dt1.tag, dt0.tag) в запросе в обеих таблицах tag обнуляются. Без COALESCE либо с COALESCE(dt0.tag, dt1.tag) все в порядке.

Не понимаю
источник
17:37пожаловаться#6

IR

Iaroslav Romanov in ClickHouse не тормозит
Переслано от Iaroslav Romanov
источник
17:37пожаловаться#7

IR

Iaroslav Romanov in ClickHouse не тормозит
Переслано от Iaroslav Romanov
источник
17:37пожаловаться#8

EK

Evgeny Kruglov (work... in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
да, from_env
Спасибо большое
источник
17:38пожаловаться#9

S

Slach in ClickHouse не тормозит
Для таблицы system.text_log
можно применять ли применять <yandex><text_log><partition_by> ... </partition_by></text_log> или
<yandex><text_log><engine> ... </engine></text_log> ?
источник
18:00пожаловаться#10

VB

Vladimir Bunchuk in ClickHouse не тормозит
Подскажите пожалуйста
позволит ли опция use_minimalistic_part_header_in_zookeeper уменьшить нагрузку на диск на серверах зукипера?
источник
18:17пожаловаться#11

DC

Denny Crane (I don't... in ClickHouse не тормозит
Vladimir Bunchuk
Подскажите пожалуйста
позволит ли опция use_minimalistic_part_header_in_zookeeper уменьшить нагрузку на диск на серверах зукипера?
вряд ли

ClickHouse release v20.1.2.4, 2020-01-22

Enable use_minimalistic_part_header_in_zookeeper setting for ReplicatedMergeTree by default. This will significantly reduce amount of data stored in ZooKeeper.
источник
18:25пожаловаться#12

DC

Denny Crane (I don't... in ClickHouse не тормозит
Kos
я следующим сообщением написал версия  20.5.3.27.
поставил значение
<max_server_memory_usage_to_ram_ratio>10</max_server_memory_usage_to_ram_ratio>
<max_server_memory_usage>0</max_server_memory_usage>
упс, пропустил, ну да скорее всего поможет <max_server_memory_usage>0
помониторьте из top столбик res(rss) сколько клик на самом деле памяти ест
источник
18:27пожаловаться#13

K

Kos in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
упс, пропустил, ну да скорее всего поможет <max_server_memory_usage>0
помониторьте из top столбик res(rss) сколько клик на самом деле памяти ест
спасибо!
источник
18:28пожаловаться#14

S

Sergei in ClickHouse не тормозит
источник
18:38пожаловаться#15

S

Sergei in ClickHouse не тормозит
Sergei
как такое может быть?
источник
18:38пожаловаться#16

S

Slach in ClickHouse не тормозит
Sergei
как такое может быть?
WHERE active=1 забыли сделать в запросе первом
источник
18:41пожаловаться#17

DC

Denny Crane (I don't... in ClickHouse не тормозит
Sergei
как такое может быть?
прав нету?
источник
18:43пожаловаться#18

S

Sergei in ClickHouse не тормозит
Slach
WHERE active=1 забыли сделать в запросе первом
там просто "where active" что исключит записи с нулевыми значениями
источник
18:43пожаловаться#19

S

Sergei in ClickHouse не тормозит
источник
18:43пожаловаться#20