L
всего 400 млн строк в таблице, на которую делаю select с group by и order by
Size: a a a
2020 August 14
И
всего 400 млн строк в таблице, на которую делаю select с group by и order by
Сколько весит?
L
волюмы прокидываю так:
volumes:
- ./chdb:/var/lib/clickhouse
- ./chlog:/var/log/clickhouse-server
- ./chconf/chconf.xml:/etc/clickhouse-server/config.d/chconf.xml
L
Сколько весит?
на диске 7ГБ вроде бы
И
на диске 7ГБ вроде бы
Норм
L
первый раз решил в бигдату поиграть, а тут сразу такое) помогите куда копать, я уже ишью переворошил в репе )
D
Всем привет.
Запускаю CH в докере, ловлю ошибку:
Хотя прокидываю кастомный конфиг (и вижу что изменения применяются в
Мой конфиг такой:
Запускаю CH в докере, ловлю ошибку:
DB::Exception: Memory limit (total) exceeded: would use 1.87 GiB (attempt to allocate chunk of 135793963 bytes), maximum: 1.75 GiB: While executing AggregatingTransform (version 20.6.3.28 (official build))Хотя прокидываю кастомный конфиг (и вижу что изменения применяются в
/var/lib/postgresql/data/preprocessed_configs/config.xml ), но почему-то не могу никак сменить это ограничение. Мой конфиг такой:
<yandex>
<users>
<default>
<max_server_memory_usage>4000000000</max_server_memory_usage>
</default>
</users>
<profiles>
<default>
<max_bytes_before_external_group_by>3000000000</max_bytes_before_external_group_by>
<max_memory_usage>4000000000</max_memory_usage>
</default>
</profiles>
</yandex>
select * from system.settings s where name like '%memory%';
тут все лимиты, проверьте своим пользователем
L
не применилось походу
L
у меня другое значение даже
DC
Всем привет.
Запускаю CH в докере, ловлю ошибку:
Хотя прокидываю кастомный конфиг (и вижу что изменения применяются в
Мой конфиг такой:
Запускаю CH в докере, ловлю ошибку:
DB::Exception: Memory limit (total) exceeded: would use 1.87 GiB (attempt to allocate chunk of 135793963 bytes), maximum: 1.75 GiB: While executing AggregatingTransform (version 20.6.3.28 (official build))Хотя прокидываю кастомный конфиг (и вижу что изменения применяются в
/var/lib/postgresql/data/preprocessed_configs/config.xml ), но почему-то не могу никак сменить это ограничение. Мой конфиг такой:
<yandex>
<users>
<default>
<max_server_memory_usage>4000000000</max_server_memory_usage>
</default>
</users>
<profiles>
<default>
<max_bytes_before_external_group_by>3000000000</max_bytes_before_external_group_by>
<max_memory_usage>4000000000</max_memory_usage>
</default>
</profiles>
</yandex>
профили пользователей в users.xml
max_server_memory_usage -- не пользовательский параметрL
max_server_memory_usage
Ограничивает объём оперативной памяти, используемой сервером ClickHouse. Настройка может быть задана только для профиля default.
L
из доки
L
я запутался, покажите, пожалуйста, кто-нибудь свой рабочий конфиг с настройкой чего-нибудь похожего и скажите куда именно вы его в докере прокидывайте(
DC
хаха, лажа в доке как всегда
DC
я запутался, покажите, пожалуйста, кто-нибудь свой рабочий конфиг с настройкой чего-нибудь похожего и скажите куда именно вы его в докере прокидывайте(
да все путаются, за пару лет разберетесь
L
кек )
L
вынес на верхний уровень, не помогло )
L
ещё и по ходу дела словил: DB::Exception: Timeout exceeded: elapsed 5.013 seconds, maximum: 5: While executing MergeTreeThread (version 20.6.3.28 (official build))
D