В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4400 membersпожаловаться на группу
2020 September 25

l

lnuynxa in ClickHouse не тормозит
Vladimir Mihailenco
что можно поковырять чтобы кликхаус работал на сервере с небольшим RAM?
пока пробовал max_concurrent_queries, background_pool_size, number_of_free_entries_in_pool_to_lower_max_size_of_merge, number_of_free_entries_in_pool_to_execute_mutation
что-нибудь еще имеет смысл смотреть? CH 20.9.2.20
mark_cache_size
источник
18:14пожаловаться#1

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Vladimir Mihailenco
для меня 4gb
mark_cache_size=512MB
mlock_executable false

своп 16 ГБ
источник
18:15пожаловаться#2

VM

Vladimir Mihailenco in ClickHouse не тормозит
:) я его прям сейчас убрал
источник
18:15пожаловаться#3

CO

Chern Oleksander in ClickHouse не тормозит
а подскажите пожалуйста, как победить 
cast(coalesce(p.done_date,0) as date) between date_add(toStartOfMonth(now()), INTERVAL -1 MONTH) and toStartOfMonth(now())-1
в этом поле есть NULL, как обойти ?
Спасибо
источник
18:16пожаловаться#4

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Vladimir Mihailenco
:) я его прям сейчас убрал
кого его?
источник
18:16пожаловаться#5

VM

Vladimir Mihailenco in ClickHouse не тормозит
swapfile
источник
18:16пожаловаться#6

VM

Vladimir Mihailenco in ClickHouse не тормозит
я ставлю max_server_memory_usage_to_ram_ratio = 2
источник
18:16пожаловаться#7

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Vladimir Mihailenco
swapfile
падать будет по ООМ без свопа и 4 ГБ
источник
18:16пожаловаться#8

VM

Vladimir Mihailenco in ClickHouse не тормозит
потому что кликхаус иначе пишет что  Memory limit (total) exceeded
источник
18:17пожаловаться#9

VM

Vladimir Mihailenco in ClickHouse не тормозит
и все нормально работает 90% времени пока он реально не начинает использвать swap
источник
18:17пожаловаться#10

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Chern Oleksander
а подскажите пожалуйста, как победить 
cast(coalesce(p.done_date,0) as date) between date_add(toStartOfMonth(now()), INTERVAL -1 MONTH) and toStartOfMonth(now())-1
в этом поле есть NULL, как обойти ?
Спасибо
or p.done_date is null
источник
18:17пожаловаться#11

VM

Vladimir Mihailenco in ClickHouse не тормозит
по-моему пытаясь сделать какой-то мерж
источник
18:18пожаловаться#12

VM

Vladimir Mihailenco in ClickHouse не тормозит
и из-за свапа все начинает тормозить
OOM без swap пока не было
но спасибо за совет - буду пробовать
источник
18:19пожаловаться#13

CO

Chern Oleksander in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
or p.done_date is null
неа, дату из datetime нужно ж всёравно перевести в date
источник
18:19пожаловаться#14

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Vladimir Mihailenco
по-моему пытаясь сделать какой-то мерж
rows to merge надо уменьшить до 512
источник
18:19пожаловаться#15

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Chern Oleksander
неа, дату из datetime нужно ж всёравно перевести в date
и что это меняет в моем ответе?
источник
18:20пожаловаться#16

CO

Chern Oleksander in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
и что это меняет в моем ответе?
я тогда вас не понял
вот весь селект
   SELECT p.user_id,
          sum(p.amount) / 100 dep_amount_lastmonth
   FROM user_payments p
   WHERE p.type = 'payin'
     AND p.status = 'done'
     AND cast(p.done_date as date) between date_add(toStartOfMonth(now()), INTERVAL -1 MONTH) and toStartOfMonth(now())-1 /*prev full month*/
       or p.done_date is null
   GROUP BY p.user_id
источник
18:20пожаловаться#17

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Chern Oleksander
я тогда вас не понял
вот весь селект
   SELECT p.user_id,
          sum(p.amount) / 100 dep_amount_lastmonth
   FROM user_payments p
   WHERE p.type = 'payin'
     AND p.status = 'done'
     AND cast(p.done_date as date) between date_add(toStartOfMonth(now()), INTERVAL -1 MONTH) and toStartOfMonth(now())-1 /*prev full month*/
       or p.done_date is null
   GROUP BY p.user_id
ну так скобочки надо ставить and ( or )  and

       AND (toDate(p.done_date) between date_add(toStartOfMonth(now()), INTERVAL -1 MONTH) and toStartOfMonth(now())-1 /*prev full month*/
         or p.done_date is null )
источник
18:22пожаловаться#18

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Vladimir Mihailenco
по-моему пытаясь сделать какой-то мерж
https://github.com/ClickHouse/ClickHouse/issues/12074#issuecomment-652505958

merge_max_block_size=512
источник
18:25пожаловаться#19

VM

Vladimir Mihailenco in ClickHouse не тормозит
спасибо
источник
18:26пожаловаться#20