Size: a a a

ClickHouse не тормозит

2021 February 17

YV

Yuri Velgosha in ClickHouse не тормозит
Денис Анатольевич
Вижу такой сценарий:
создать новую таблицу, и начать все писать туда, а тем временем перенести данные из старой в новую. Так делают?
Да, вполне рабочий вариант. Просто приложение должно уметь писать в таблицу с новым именем на переходный период.
Ну или создать рядом новый кластер, с пустой таблицей, переключить туда приложение, а потом из старого кластера залить данные.
источник

ДА

Денис Анатольевич... in ClickHouse не тормозит
Спасибо, так и буду делать значит, изучу как делать "вырезать-вставить", а то место не резиновое :( нет дополнительных 6ТБ для задвоения
источник

D

Dro in ClickHouse не тормозит
Всем привет, пытаюсь построить дашборд в графане для КХ, собираю метрики через прометеус. В прометеусе есть два вида метрик например,
ClickHouseProfileEvents_...
и
ClickHouseMetrics...
пересмотрел доку несколько раз в т.ч. и исходники, так и не смог понять что к чему относится и на что опираться? Подскажите
источник

D

Dro in ClickHouse не тормозит
есть поозрения, что одни метрики мнгновенные - здесь и сейчас, а вторая как счетчик - за все время работы
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Денис Анатольевич
Вижу такой сценарий:
создать новую таблицу, и начать все писать туда, а тем временем перенести данные из старой в новую. Так делают?
да, писать в новую,  накрыть обе engine=Merge -- для селектов
через два года старая таблица станет пустой, натуральным образом
источник

S

Slach in ClickHouse не тормозит
Dro
Всем привет, пытаюсь построить дашборд в графане для КХ, собираю метрики через прометеус. В прометеусе есть два вида метрик например,
ClickHouseProfileEvents_...
и
ClickHouseMetrics...
пересмотрел доку несколько раз в т.ч. и исходники, так и не смог понять что к чему относится и на что опираться? Подскажите
источник

D

Dro in ClickHouse не тормозит
спасибо, странно что не увидел его на графане этот даш
источник

MG

Mikhail Glader in ClickHouse не тормозит
Всем привет. Как трактовать результат create table on cluster? В доке не нашел. Ответ вида
node1  9000  0    1  0
node2  9000  0    0  0
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Mikhail Glader
Всем привет. Как трактовать результат create table on cluster? В доке не нашел. Ответ вида
node1  9000  0    1  0
node2  9000  0    0  0
ответ куда? в оф. клиент?
шо без имен полей?
источник

MG

Mikhail Glader in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
ответ куда? в оф. клиент?
шо без имен полей?
Запускал в tabix, он на всякие create table, show create table не выводит поля, только результат.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Mikhail Glader
Запускал в tabix, он на всякие create table, show create table не выводит поля, только результат.
в общем это надо трактовать как успешный результат

┌─host──┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ host1 │ 9000 │      0 │       │                   1 │                0 │
│ host2 │ 9000 │      0 │       │                   0 │                0 │
└───────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
источник

MG

Mikhail Glader in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
в общем это надо трактовать как успешный результат

┌─host──┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ host1 │ 9000 │      0 │       │                   1 │                0 │
│ host2 │ 9000 │      0 │       │                   0 │                0 │
└───────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
"num_hosts_remaining" - куда постепенно доедет, но еще не доехало?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
эта табличка выводится как бы несколько раз, по мере выполнения
num_hosts_remaining -- сколько еще хостов не выполнило
источник

MG

Mikhail Glader in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
эта табличка выводится как бы несколько раз, по мере выполнения
num_hosts_remaining -- сколько еще хостов не выполнило
Спасибо!
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
┌─host───────────┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ hostDEmunxx738 │ 9000 │      0 │       │                   7 │                6 │
│ hostDEmunxx739 │ 9000 │      0 │       │                   6 │                6 │
└────────────────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
┌─host───────────┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ hostDEmunxx733 │ 9000 │      0 │       │                   5 │                4 │
│ hostDEmunxx735 │ 9000 │      0 │       │                   4 │                4 │
└────────────────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
┌─host─────────────┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ hostDEmunxx734   │ 9000 │      0 │       │                   3 │                2 │
│ hostDEmunxx10105 │ 9000 │      0 │       │                   2 │                2 │
└──────────────────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
┌─host─────────────┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ hostDEmunxx10104 │ 9000 │      0 │       │                   1 │                1 │
└──────────────────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
┌─host───────────┬─port─┬─status─┬─error─┬─num_hosts_remaining─┬─num_hosts_active─┐
│ hostDEmunxx723 │ 9000 │      0 │       │                   0 │                0 │
└────────────────┴──────┴────────┴───────┴─────────────────────┴──────────────────┘
источник

D

Dj in ClickHouse не тормозит
а можно это как-то этот путь per-cluster задавать?
    <distributed_ddl>
       <path>/clickhouse/task_queue/ddl</path>
   </distributed_ddl>
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Dj
а можно это как-то этот путь per-cluster задавать?
    <distributed_ddl>
       <path>/clickhouse/task_queue/ddl</path>
   </distributed_ddl>
как оказалось у меня шеф при генерации подставляет

       <path>/clickhouse/production/task_queue/ddl</path>
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
в таблицах в zk пути /clickhouse/{cluster}/
и макрос cluster = production
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
как оказалось у меня шеф при генерации подставляет

       <path>/clickhouse/production/task_queue/ddl</path>
в таблицах это не пишется, это в конфиг пишется...
можно без шефа?
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
в таблицах в zk пути /clickhouse/{cluster}/
и макрос cluster = production
с таблицами ок, не проблема, мы хардкодом прям пишем имя кластера по умолчанию
источник