Size: a a a

ClickHouse не тормозит

2020 August 10

SA

Sergei Alekseev in ClickHouse не тормозит
Добрый вечер! Стоит выбор ОС для КХ. Дебиан или убунта. Есть ли причины выбрать что-то конкретное?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Sergei Alekseev
Добрый вечер! Стоит выбор ОС для КХ. Дебиан или убунта. Есть ли причины выбрать что-то конкретное?
без разницы. У КХ один и тот же бинарник собранный статически.
Что вам удобнее админить
источник

S

Slach in ClickHouse не тормозит
Sergei Alekseev
Добрый вечер! Стоит выбор ОС для КХ. Дебиан или убунта. Есть ли причины выбрать что-то конкретное?
разницы с точки зрения CH нет, это статический бинарник без зависимостей...

разница есть только если вы понимаете разницу между ядром убунты и ядром дебиан и умеете тюнить
источник

D

Dj in ClickHouse не тормозит
Sergei Alekseev
Добрый вечер! Стоит выбор ОС для КХ. Дебиан или убунта. Есть ли причины выбрать что-то конкретное?
RHEL =)
источник

ИМ

Илья Максимов... in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
это не в теории, это фактически пересоздание всей таблицы (партиции)
Помогло, grazie!
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Илья Максимов
Помогло, grazie!
у вас на репликах в папке detached куча партов теперь, их вам надо удалить
источник

ИМ

Илья Максимов... in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
у вас на репликах в папке detached куча партов теперь, их вам надо удалить
attach кусками обратно не поможет? И теперь понять бы это нормальные данные, или действительно мусор который можно безопасно удалить?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Илья Максимов
attach кусками обратно не поможет? И теперь понять бы это нормальные данные, или действительно мусор который можно безопасно удалить?
ох

у вас была таблица X и там были парты A1 B1 C1 на всех репликах
вы сделали детач, парты A1 B1 C1 попали в папку detached
на одной из реплик вы сделали attach парты присоединились и переименовались в A2 B2 C2
другие реплики скачали A2 B2 C2
у этих других реплик остались в папке detached A1 B1 C1
если вы сделаете attach для A1 B1 C1 , они присоединятся переименуются и все удвоится, утроится, учетверится

в папке detached куча партов теперь, их вам надо удалить
источник

ИМ

Илья Максимов... in ClickHouse не тормозит
Понял понял)
источник

AL

Alexey Likutov in ClickHouse не тормозит
Pavel L
Всем привет.
Как вы проводите миграции? По ответам вижу, что у всех что-то самописное, но может появилась уже версия flyway или liquibase с поддержкой КХ?
вижу пр https://github.com/flyway/flyway/pull/2640, но он не вмержен пока что.
мы флайвей используем собранный года полтора назад из какого то пулл реквеста
источник

PL

Pavel L in ClickHouse не тормозит
Alexey Likutov
мы флайвей используем собранный года полтора назад из какого то пулл реквеста
О, мы тоже собираемся это сделать. Спасибо
источник

AL

Alexey Likutov in ClickHouse не тормозит
можно собрать и опубликовать как артифакт в ваш личный нексус, например
источник
2020 August 11

b

blkmrkt in ClickHouse не тормозит
Ребят, подскажите легкий драйвер Кликхауза для Питона 2.7. Мне нужно добавить в существующий код с gevent лупом кусочек для отправки колонок в КХ, да так чтоб не блокировало основной тред вебворкера, либо делало это после отдачи ответа клиенту.

Какой протокол КХ для этого лучше подойдет - нативный или хттп?
источник

SC

Smoked Cheese in ClickHouse не тормозит
можешь просто по http ходить
источник

SC

Smoked Cheese in ClickHouse не тормозит
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
подскажите, пожалуйста, по полю elapsed из табилцы system.processes, оно вроде показывает секунды с начала обработки запросов, как и почему оно может превышать таймаут?
источник

S

Slach in ClickHouse не тормозит
Егор Андреевич
подскажите, пожалуйста, по полю elapsed из табилцы system.processes, оно вроде показывает секунды с начала обработки запросов, как и почему оно может превышать таймаут?
timeout на клиенте задается

на сервере есть  вот такое
https://clickhouse.tech/docs/en/operations/settings/query-complexity/#max-execution-time
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
я правильно понял, что по умолчанию на сервере нет ограничений на время выполнения?
источник

K

Kos in ClickHouse не тормозит
кто подключался к mongo через odbc ? подключение напрямую делается или надо поднять промежуточную службу MongoDB Connector for BI Components?
источник

S

Slach in ClickHouse не тормозит
Егор Андреевич
я правильно понял, что по умолчанию на сервере нет ограничений на время выполнения?
да все верно
когда отваливается клиент, это просто отваливается клиент
выполнение запроса на сервере продолжается

KILL QUERY ... SYNC вам в помощь, но оно тоже не делает на самом деле KILL. там просто флаг выставляется который в query thread весьма не часто проверяется после чего происходит остановка выполнения запроса

и даже для max_exectution_time есть исключение
At this time, it is not checked for one of the sorting stages, or when merging and finalizing aggregate functions.
источник