A
ну у меня прям легкие запросы не выполняются — падают по памяти
а с какой ошибкой?
Size: a a a
2020 May 25
VB
а с какой ошибкой?
DB::Exception: Memory limit (total) exceeded: would use 113.00 GiB (attempt to allocate chunk of 5242880 bytes), maximum: 112.99 GiB.SA
Добрый день! субъективно при переходе с 19.16.x на 20.4.x просело время выполнения запросов. Никто не замечал? Есть ли смысл собирать самому КХ? Может через пакет чего-то лишнего или более универсально в ущерб производительности? И по поводу системы пермишеннов в КХ, как-то это все можно при сборке отключать, чтобы не тратить ресурсы на проверку грандов?
AK
Добрый день! субъективно при переходе с 19.16.x на 20.4.x просело время выполнения запросов. Никто не замечал? Есть ли смысл собирать самому КХ? Может через пакет чего-то лишнего или более универсально в ущерб производительности? И по поводу системы пермишеннов в КХ, как-то это все можно при сборке отключать, чтобы не тратить ресурсы на проверку грандов?
Относительно ресурсов на обработку запроса (читать данные и производить над ними операции преобразования) операции ACL копеечные
AT
Добрый день! субъективно при переходе с 19.16.x на 20.4.x просело время выполнения запросов. Никто не замечал? Есть ли смысл собирать самому КХ? Может через пакет чего-то лишнего или более универсально в ущерб производительности? И по поводу системы пермишеннов в КХ, как-то это все можно при сборке отключать, чтобы не тратить ресурсы на проверку грандов?
попробуйте вот это
The setting experimental_use_processors is enabled by default. This setting enables usage of the new query pipeline. This is internal refactoring and we expect no visible changes. If you will see any issues, set it to back zero.
The setting experimental_use_processors is enabled by default. This setting enables usage of the new query pipeline. This is internal refactoring and we expect no visible changes. If you will see any issues, set it to back zero.
AT
выкатили по дефолту с 20.3
A
разница объема идентичных по колонкам таблиц, аж не верится как то)
ЕА
mysql запущенный на freebsd например будет таким же по объему, просто кликхаус использует сжатие нормальное
A
понял, спасибо
AT
или колонки низкокардинальные
AT
сжатие и в mysql можно поставить
MV
стриминг прекращается вот с такой ошибкой
2020.05.25 03:13:20.710252 [ 12999 ] {} <Warning> StorageKafka (dau): Logical error. Non all polled messages were processed.
2020.05.25 03:13:20.710282 [ 12999 ] {} <Trace> StorageKafka (dau): Nothing to commit.
Пробовал:
1. Пересоздавать топик в кафке, кафка-table, матвьюхи и таблицу назначения. В итоге спустя несколько часов ошибка повторяется.
2. Читать консьюмером той же версии но на другом хосте, - ошибка не повторяется, и там в течение недели стримится без проблем
20 топиков в этой же базе с этим же источником успешно стримятся.
2020.05.25 03:13:20.710252 [ 12999 ] {} <Warning> StorageKafka (dau): Logical error. Non all polled messages were processed.
2020.05.25 03:13:20.710282 [ 12999 ] {} <Trace> StorageKafka (dau): Nothing to commit.
Пробовал:
1. Пересоздавать топик в кафке, кафка-table, матвьюхи и таблицу назначения. В итоге спустя несколько часов ошибка повторяется.
2. Читать консьюмером той же версии но на другом хосте, - ошибка не повторяется, и там в течение недели стримится без проблем
20 топиков в этой же базе с этим же источником успешно стримятся.
может недостаточно вводных или деталей? чем предположительно это вылечить?
КТ
select toStartOfMonth(date) as date, ... etc ... from table where date=today()
так нельзя в where обратиться прям к столбцу date ибо в выборке он будет уже как toStartOfMonth(date)
КТ
но а если уж очень хочется может как то можно?
КТ
большое желание (увы, не моё) назвать в выборке начало месяца именно date
и ещё и where по этому столбцу надо
и ещё и where по этому столбцу надо
КТ
по исходному, до применения функции toStartOfMonth()
MK
скажите пожалуйста можно ли выбрать из такого сэта строки с минимальным start_year_on_new_place для каждого множества employee_id, company_id
AT
но а если уж очень хочется может как то можно?
сделать sub-select c where date=XXX ?
AT
а потом его уже выбирать с функцией toStartOfMonth
КТ
ммм, это работает
спасибо
спасибо