Size: a a a

ClickHouse не тормозит

2021 March 12

-

-_- in ClickHouse не тормозит
Alexey Milovidov
А в каком виде сейчас получается массив? Там не строки, а что?
Там иногда числа, иногда цифры с символами. И, как я понимаю, их тип автоматический
источник

-

-_- in ClickHouse не тормозит
0028, D018
источник

AM

Alexey Milovidov in ClickHouse не тормозит
-_-
Там иногда числа, иногда цифры с символами. И, как я понимаю, их тип автоматический
CAST(... AS Array(String))
источник

AM

Alexey Milovidov in ClickHouse не тормозит
-_-
0028, D018
Но если написать в запросе
D018 без кавычек, то запрос будет некорректным.

Или если написать

[0028, 'D018'] - строки и числа в перемешку, то тоже.
источник

-

-_- in ClickHouse не тормозит
Он 0028 определил как float64,  и пишет 28.
источник

-

-_- in ClickHouse не тормозит
Выкрутился, добавив вначале точку, так определилось однозначно строкой, но это костыль
источник

PK

Pavel Khripkov in ClickHouse не тормозит
Привет коллеги. Вопрос уже задавал, но решения пока не нашёл.

INSERT SELECT...GROUP BY приводит к Memory limit (for query) exceeded. Размер таблицы 30 столбцов, 400 байт на строку в среднем. Выборка без вставки отрабатывает без проблем.

Проверял на версиях 20.12.5.14 и 21.2.5.5. Настройки max_insert_threads, min_insert_block_size_rows, min_insert_block_size_bytes и даже max_insert_block_size не дают результата.
источник

D

Dj in ClickHouse не тормозит
Pavel Khripkov
Привет коллеги. Вопрос уже задавал, но решения пока не нашёл.

INSERT SELECT...GROUP BY приводит к Memory limit (for query) exceeded. Размер таблицы 30 столбцов, 400 байт на строку в среднем. Выборка без вставки отрабатывает без проблем.

Проверял на версиях 20.12.5.14 и 21.2.5.5. Настройки max_insert_threads, min_insert_block_size_rows, min_insert_block_size_bytes и даже max_insert_block_size не дают результата.
просто селект в трейсе сколько памяти ест?
источник

PK

Pavel Khripkov in ClickHouse не тормозит
Dj
просто селект в трейсе сколько памяти ест?
Трейс не смотрел, в табиксе 50 Гб, как задано в настройках памяти для группировки
источник

D

Dj in ClickHouse не тормозит
max_insert_threads=1?
источник

D

Dj in ClickHouse не тормозит
optimize_on_insert=0 попробуйте тож
источник

PK

Pavel Khripkov in ClickHouse не тормозит
Dj
max_insert_threads=1?
Да
источник

PK

Pavel Khripkov in ClickHouse не тормозит
Dj
optimize_on_insert=0 попробуйте тож
Пробовал(
источник

AM

Alexey Milovidov in ClickHouse не тормозит
Видеозапись митапа: https://youtu.be/HPJOgzQkRls

Для тех, кто задавал вопросы вживую - чтобы получить футболки, напишите @Ann_Bocharova в личку.
источник

D

Dj in ClickHouse не тормозит
ну пробуйте уменьшать max_insert_block_size
и max_threads тоже.

МВ может есть в таргет таблице?
источник

D

Dj in ClickHouse не тормозит
Alexey Milovidov
Видеозапись митапа: https://youtu.be/HPJOgzQkRls

Для тех, кто задавал вопросы вживую - чтобы получить футболки, напишите @Ann_Bocharova в личку.
а международная доставка заработала? )
источник

PK

Pavel Khripkov in ClickHouse не тормозит
Dj
ну пробуйте уменьшать max_insert_block_size
и max_threads тоже.

МВ может есть в таргет таблице?
Спасибо, попробую, тогда отпишусь. Что такое МВ?)
источник

AM

Alexey Milovidov in ClickHouse не тормозит
Dj
а международная доставка заработала? )
По большей части работает.
источник

D

Dj in ClickHouse не тормозит
Alexey Milovidov
По большей части работает.
а на команду тоже можно =) по сумме за несколько митапов 😁
источник

D

Dj in ClickHouse не тормозит
Pavel Khripkov
Спасибо, попробую, тогда отпишусь. Что такое МВ?)
materialized view
источник