Size: a a a

ClickHouse не тормозит

2020 June 30

PL

Paul Loyd in ClickHouse не тормозит
Тип PK какой был?
источник

VM

Vadim Metikov in ClickHouse не тормозит
Paul Loyd
Тип PK какой был?
Не понял вопроса,  какие поля?
источник

PL

Paul Loyd in ClickHouse не тормозит
Vadim Metikov
Не понял вопроса,  какие поля?
Ага
источник

VM

Vadim Metikov in ClickHouse не тормозит
Paul Loyd
Ага
toMonday(Date)
источник

PL

Paul Loyd in ClickHouse не тормозит
Хех. Ясно, спасибо
источник

DT

Dmitry Titov in ClickHouse не тормозит
Vadim Metikov
toMonday(Date)
Это только часть PRIMARY KEY или весь?
источник

AM

Alex Moran in ClickHouse не тормозит
Arsen
Invalid status for associated output
Коллеги, добрый день.
По данной ошибке ничего не прояснилось?
источник

VM

Vadim Metikov in ClickHouse не тормозит
Dmitry Titov
Это только часть PRIMARY KEY или весь?
Это partition by, еще order by (path, time)
источник

Д

Дмитрий in ClickHouse не тормозит
Всем доброго времени суток. Подскажите, пожалуйста, такой момент: я использую для вставки данных в БД Clickhouse на python clickhouse_driver, перед вставкой записей в таблицу формирую список кортежей с данными на основе текстовых файлов (некоторые json-данные). При этом я получаю периодически ошибку:
источник

Д

Дмитрий in ClickHouse не тормозит
clickhouse_driver.errors.ServerException: Code: 241.
DB::Exception: Memory limit (total) exceeded: would use 3.25 GiB (attempt to allocate chunk of 4502632 bytes), maximum: 3.25 GiB.
источник

Д

Дмитрий in ClickHouse не тормозит
как можно это исправить? Сталкивался ли кто-либо с похожей проблемой?
источник

Д

Дмитрий in ClickHouse не тормозит
таблица организована на движке MergeTree(), поля - FixedString определённой заранее размерности
источник

ЕГ

Евгений Гордеев... in ClickHouse не тормозит
Дмитрий
Всем доброго времени суток. Подскажите, пожалуйста, такой момент: я использую для вставки данных в БД Clickhouse на python clickhouse_driver, перед вставкой записей в таблицу формирую список кортежей с данными на основе текстовых файлов (некоторые json-данные). При этом я получаю периодически ошибку:
источник

AB

Andrey Bobelev in ClickHouse не тормозит
up, проблема актуальная
источник

AB

Andrey Bobelev in ClickHouse не тормозит
Переслано от Andrey Bobelev
Привет, при апгрейде с 19.13.3.26 до 20.3.11.97 очень много такого
Таблицы локальные MergeTree, не реплицируемые

https://pastebin.vkpartner.ru/raw/ergJ5aIZb0VAU5vhlmIoQ4CydHWzNksGJDobibwdEsvqRwsEdXvSPgpZ78DQc4xh8Nx2oRL3VoUkhTa8
источник

AB

Andrey Bobelev in ClickHouse не тормозит
Переслано от Andrey Bobelev
После 10 минут попытки запуска оно падает c ошибкой Suspiciously many (38) broken parts to remove.
источник

Д

Дмитрий in ClickHouse не тормозит
вроде как да, огромное Вам спасибо
источник

ЕГ

Евгений Гордеев... in ClickHouse не тормозит
Andrey Bobelev
Переслано от Andrey Bobelev
После 10 минут попытки запуска оно падает c ошибкой Suspiciously many (38) broken parts to remove.
Выглядит так, как будто оно пытается реорганизовать партишены по новому но не понимает конфига. Я не помню навскидку какие там были версии клика, но не было такого что между вашей 19 и 20 есть еще промежуточные? Т.е. может нужно апгрейдиться сначала в "промежуточные" версии?
источник

AB

Andrey Bobelev in ClickHouse не тормозит
Евгений Гордеев
Выглядит так, как будто оно пытается реорганизовать партишены по новому но не понимает конфига. Я не помню навскидку какие там были версии клика, но не было такого что между вашей 19 и 20 есть еще промежуточные? Т.е. может нужно апгрейдиться сначала в "промежуточные" версии?
У мене промежуточных нет, апгрейжусь именно с 19.13.3.26 до 20.3.11.97
источник

ЕГ

Евгений Гордеев... in ClickHouse не тормозит
Всмысле что еррор:
<Error> DB::MergeTreeData::loadDataParts(bool)::<lambda()>: Code: 33, e.displayText() = DB::Exception: Cannot read all data. Bytes read: 2. Bytes expected: 4.
Т.е. клик не находит какого-то ожидаемого поля в заголовке похоже.
источник