В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4056 membersпожаловаться на группу
2020 July 02

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
да мы то его уберем (параметр в дефолт), вопрос как такое вообще возможно?

т.е. сценарий такой:
01 был лидером, не успевал мерджить
потом упал в РО
потом 02 стал лидером, но ему что-то не прилетело?

не совсем ясно как вообще возможно.

как возможно разное количество строк, все вставки строго в дистрибютед?
как возможно что парты разные?
ну и как это починить =)
возможно парт лежит в detached, надо читать лог, непонятно что случилось, обычно парты теряются только при падении сервера
источник
17:42пожаловаться#1

DC

Denny Crane (I don't... in ClickHouse не тормозит
>как возможно разное количество строк, все вставки строго в дистрибютед?
при чем тут дистрибютед вообще?  
какой-то парт еще не скачен?
я бы сделал system restart replica
источник
17:43пожаловаться#2

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
возможно парт лежит в detached, надо читать лог, непонятно что случилось, обычно парты теряются только при падении сервера
там есть актив=1 условие, т.е. это все активные парты
источник
17:43пожаловаться#3

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
>как возможно разное количество строк, все вставки строго в дистрибютед?
при чем тут дистрибютед вообще?  
какой-то парт еще не скачен?
я бы сделал system restart replica
про дистрибютед -  я к тому, что локально напрямую в таблицу вставок не было.

на хост01 180 партов
на хост02 7 партов

очередь пустая практически
источник
17:45пожаловаться#4

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
>как возможно разное количество строк, все вставки строго в дистрибютед?
при чем тут дистрибютед вообще?  
какой-то парт еще не скачен?
я бы сделал system restart replica
>я бы сделал system restart replica

ок, проверим, спасибо
источник
17:45пожаловаться#5

G

GithubReleases in ClickHouse не тормозит
ClickHouse/ClickHouse tagged: v20.5.2.7-stable
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v20.5.2.7-stable
Release notes:
v20.5.2.7-stable
GitHub
Release v20.5.2.7-stable · ClickHouse/ClickHouse
источник
17:50пожаловаться#6

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
про дистрибютед -  я к тому, что локально напрямую в таблицу вставок не было.

на хост01 180 партов
на хост02 7 партов

очередь пустая практически
дистрибютед в этом случае это обычный клиент, который делает обычные инсерты
источник
17:50пожаловаться#7

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
дистрибютед в этом случае это обычный клиент, который делает обычные инсерты
Если у меня две реплики на шард, в какую из них этот виртуальный клиент делает  инсерт?
источник
17:52пожаловаться#8

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
Если у меня две реплики на шард, в какую из них этот виртуальный клиент делает  инсерт?
в обе, рандомно
источник
17:52пожаловаться#9

DC

Denny Crane (I don't... in ClickHouse не тормозит
это пока не настраивается, но кажется работы шли, чтобы можно было настроить
источник
17:53пожаловаться#10

DS

Dmitry S. in ClickHouse не тормозит
Подскажите пожалуйста, clickhouse может бэкапироваться дифференциально? Что-то нигде не могу найти такой инфы
источник
18:04пожаловаться#11

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
в обе, рандомно
оо, я почему то думал он в шарды по ключам а в реплики в лидеров вставляет. Спасибо. теперь уже яснее почему разные парты в разных репликах.
источник
18:14пожаловаться#12

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
оо, я почему то думал он в шарды по ключам а в реплики в лидеров вставляет. Спасибо. теперь уже яснее почему разные парты в разных репликах.
лидеры только для назначения мержей, и Алексей уже выпилили лидеров
источник
18:15пожаловаться#13

D

Dj in ClickHouse не тормозит
ясно, а если хосты все равно не сойдутся, какая последовательность действий, чтобы выпилить партишн с одной реплики и перетащить с другой?
источник
18:16пожаловаться#14

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
ясно, а если хосты все равно не сойдутся, какая последовательность действий, чтобы выпилить партишн с одной реплики и перетащить с другой?
ну само должно такое решаться, в крайнем случае system restart replica
источник
18:18пожаловаться#15

DC

Denny Crane (I don't... in ClickHouse не тормозит
в крайнем случае detach partitiion / attach
источник
18:19пожаловаться#16

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
ну само должно такое решаться, в крайнем случае system restart replica
а так?
host01 :) SYSTEM RESTART REPLICAS

 

SYSTEM RESTART REPLICAS

 

Timeout exceeded while receiving data from server. Waited for 300 seconds, timeout is 300 seconds.
Cancelling query.
Ok.
Query was cancelled.

 

0 rows in set. Elapsed: 307.742 sec.
источник
18:19пожаловаться#17

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
а так?
host01 :) SYSTEM RESTART REPLICAS

 

SYSTEM RESTART REPLICAS

 

Timeout exceeded while receiving data from server. Waited for 300 seconds, timeout is 300 seconds.
Cancelling query.
Ok.
Query was cancelled.

 

0 rows in set. Elapsed: 307.742 sec.
это ничего не значит
источник
18:20пожаловаться#18

DC

Denny Crane (I don't... in ClickHouse не тормозит
оно все еще работает
источник
18:20пожаловаться#19

DC

Denny Crane (I don't... in ClickHouse не тормозит
надо смотреть в system.replication_queue
источник
18:20пожаловаться#20