Size: a a a

ClickHouse не тормозит

2020 June 25

DC

Denny Crane (I don't... in ClickHouse не тормозит
КХ читает таблицу в 40 потоков, какой поток успеет прочитать быстрее тот и первый выдаст свой результат в выхлоп селекта
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Николай
не знаю где я это подхватил, что должно выдавать отсортированные данные
это было верно для mysql очень давно, очень
источник

Н

Николай in ClickHouse не тормозит
хотел ресурсов сэкономить
источник

Н

Николай in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
это было верно для mysql очень давно, очень
Спасибо
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Николай
хотел ресурсов сэкономить
в современных КХ (с 19.16) если order by у select совпадает с order by таблицы, то КХ использует сортированность таблицы, и оптимизирует
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
(не сортирует, а читает из таблицы в нужном порядке)
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
но order by в select все равно необходим
источник

Н

Николай in ClickHouse не тормозит
Спасибо, теперь ясно, попробую обновить версию и сделать так
источник

В

Влад in ClickHouse не тормозит
Всех приветствую!

Версия - 19.9.4.3419.9.4.34
Есть проблема, добавил новых узлов  в кластеры.
И по ним  не проходят какие-либо запрос с ON CLUSTER, ни по одному кластеру.
В ответе только старые, существующие узлы из кластеров.  А на новые прилетает от ZK is executing longer than distributed_ddl_task_timeout (=60) seconds.

Может это известная проблема, либо что-то не так делаю? В system.clusters узлы видны. Секция <remote_servers> корректна, проверял. Сервера по TCP порту друг друга видят, и SELECT, например, запросы проходят. С ZK связь есть.
Но почему-то ON CLUSTER не проходит. Может что-то упускаю при добавлении узлов?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Влад
Всех приветствую!

Версия - 19.9.4.3419.9.4.34
Есть проблема, добавил новых узлов  в кластеры.
И по ним  не проходят какие-либо запрос с ON CLUSTER, ни по одному кластеру.
В ответе только старые, существующие узлы из кластеров.  А на новые прилетает от ZK is executing longer than distributed_ddl_task_timeout (=60) seconds.

Может это известная проблема, либо что-то не так делаю? В system.clusters узлы видны. Секция <remote_servers> корректна, проверял. Сервера по TCP порту друг друга видят, и SELECT, например, запросы проходят. С ZK связь есть.
Но почему-то ON CLUSTER не проходит. Может что-то упускаю при добавлении узлов?
hostname -f на новых узлах случайно не localhost ?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
В зукипер кладется задания для узла b. Узел  b должен быть в курсе что он b и что у него ip тот который опиисан в remote servers
источник

A

Alex in ClickHouse не тормозит
Всем привет!
Есть версия 19.17.2 (одна нода, без репликаций/шардингов и т.п., докер, с пробрасыванием нужного volume), хотим обновить до самой последней версии. Можно ли просто спулить из докерхаба последнюю версию и запустить её натравив на тот же volume? Ничего не поломается?
источник

ИИ

Илья Ибрагимов... in ClickHouse не тормозит
Коллеги, доброго утра. Подскажите, пожалуйста, почему зукипер может весить больше, чем весь кластер кликхауса в несколько раз?

Кластер развернут в кубернетесе.

Конфигурация:
3 ноды зукипера
2 шарда и 2 реплики кликхауса

Кластер кликхауса весит 20гб

каждая нода зукипера ~ 55гб

Запись происходит в базу раз в 5 секунд
источник

S

Shazo in ClickHouse не тормозит
Alex
Всем привет!
Есть версия 19.17.2 (одна нода, без репликаций/шардингов и т.п., докер, с пробрасыванием нужного volume), хотим обновить до самой последней версии. Можно ли просто спулить из докерхаба последнюю версию и запустить её натравив на тот же volume? Ничего не поломается?
протестируйте на ттестовой кластере. В changelog есть изменения, среди них бывают меняющие совместимость.
источник

S

Shazo in ClickHouse не тормозит
Илья Ибрагимов
Коллеги, доброго утра. Подскажите, пожалуйста, почему зукипер может весить больше, чем весь кластер кликхауса в несколько раз?

Кластер развернут в кубернетесе.

Конфигурация:
3 ноды зукипера
2 шарда и 2 реплики кликхауса

Кластер кликхауса весит 20гб

каждая нода зукипера ~ 55гб

Запись происходит в базу раз в 5 секунд
а зукипер настраивали как-то?
источник

ИИ

Илья Ибрагимов... in ClickHouse не тормозит
вроде как на стандартных настройках работает
источник

S

Shazo in ClickHouse не тормозит
источник

S

Shazo in ClickHouse не тормозит
Можно со строчек:

С настройками по умолчанию, ZooKeeper является бомбой замедленного действия
источник

S

Shadilan R16 MU Rost... in ClickHouse не тормозит
Илья Ибрагимов
Коллеги, доброго утра. Подскажите, пожалуйста, почему зукипер может весить больше, чем весь кластер кликхауса в несколько раз?

Кластер развернут в кубернетесе.

Конфигурация:
3 ноды зукипера
2 шарда и 2 реплики кликхауса

Кластер кликхауса весит 20гб

каждая нода зукипера ~ 55гб

Запись происходит в базу раз в 5 секунд
а там не логи у вас все забивают?
источник

ИИ

Илья Ибрагимов... in ClickHouse не тормозит
посмотрю, спасибо!
источник