В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

3913 membersпожаловаться на группу
2020 May 22

S

Shazo in ClickHouse не тормозит
Dmitriy Novikov
А вообще чтоб настроить простой кластер на 3 машины нужно сильно напрячься?
Нет, все просто. Особенно в сравнении с хадуп.

Ставите кластер зукипера, устанавливаете кх, описываете в конфигах шарды и реплики, и создаете таблицы с движком replicated. Все
источник
00:16пожаловаться#1

AT

Al T in ClickHouse не тормозит
Shazo
Нет, все просто. Особенно в сравнении с хадуп.

Ставите кластер зукипера, устанавливаете кх, описываете в конфигах шарды и реплики, и создаете таблицы с движком replicated. Все
и после этого всё только начинается ))
источник
00:17пожаловаться#2

A

Andrey in ClickHouse не тормозит
Dmitriy Novikov
Хорошо спасибо. Просто вы написали что нужен подрядчик. Я думал там прям как ходуп зоопарк
Ну не хадуп конечно. Но сейчас уже появляется достаточно крутилок которые влияют на перфоманс. Т.е по классике, по дефолту работает, но когда дело доходит до выжимания железа без остатка, то без погружения никак. Один кеш разжатых данных чего стоит)
источник
00:17пожаловаться#3

DN

Dmitriy Novikov in ClickHouse не тормозит
Хорошо а то мы попробовали готовый кластер на облаках. Но там 10% от возможностей клика. Нужен свой.
источник
00:17пожаловаться#4

S

Shazo in ClickHouse не тормозит
Al T
и после этого всё только начинается ))
Ну далее уже почти все крутилки и развлечения идентичны что в кластере, что сингл инсталяция
источник
00:18пожаловаться#5

AT

Al T in ClickHouse не тормозит
Shazo
Ну далее уже почти все крутилки и развлечения идентичны что в кластере, что сингл инсталяция
ну может быть, мне table in read-only mode снился одно время ночами
источник
00:18пожаловаться#6

AT

Al T in ClickHouse не тормозит
когда уже сделают как кафку без зукипера
источник
00:20пожаловаться#7

S

Shazo in ClickHouse не тормозит
Al T
ну может быть, мне table in read-only mode снился одно время ночами
Мм мы только чуть с ним помучались когда писали в дистрибьютед. Отказавшись от этого, уже живем спокойно. При том что у нас и зукипера на тех же серверах. Но у нас не шибко большой поток данных
источник
00:20пожаловаться#8

DC

Denny Crane (I don't... in ClickHouse не тормозит
Andrey
Ну не хадуп конечно. Но сейчас уже появляется достаточно крутилок которые влияют на перфоманс. Т.е по классике, по дефолту работает, но когда дело доходит до выжимания железа без остатка, то без погружения никак. Один кеш разжатых данных чего стоит)
нет никаких крутилок.
uncompressed кеш ничего не стоит, им никто не пользуется, по факту бесполезная вещь, которая очень редко нужна в ситуации типа ch under storm (altinity blog)
источник
00:25пожаловаться#9

DC

Denny Crane (I don't... in ClickHouse не тормозит
Al T
ну может быть, мне table in read-only mode снился одно время ночами
zk одна из самых стабильных и надеждных вещей на планете, я не думаю что его открутят от КХ в ближайшие 5 - 10 лет.
источник
00:26пожаловаться#10

D

Dj in ClickHouse не тормозит
почему такое может начаться? и как лечить? просто увеличением?
2020.05.22 00:46:14.504575 [ 169902 ] {} <Trace> MNP.****: Number of queued merges (16) and part mutations (0) is greater than max_replicated_merges_in_queue (16), so won't select new parts to merge or mutate.
источник
00:48пожаловаться#11

D

Dj in ClickHouse не тормозит
количество партов доросло до 370 и вставки встали
источник
00:48пожаловаться#12

D

Dj in ClickHouse не тормозит
мерджи не идут
источник
00:48пожаловаться#13

D

Dj in ClickHouse не тормозит
один и тот же парт пытается сам себя взять с реплики
источник
00:51пожаловаться#14

D

Dj in ClickHouse не тормозит
is_currently_executing=0, в system.replication_queue
источник
01:09пожаловаться#15

D

Dj in ClickHouse не тормозит
select count(*) from system.replication_queue
1573
источник
01:10пожаловаться#16

S

Shazo in ClickHouse не тормозит
Если попробовать детач, атач?
источник
01:15пожаловаться#17

DC

Denny Crane (I don't... in ClickHouse не тормозит
а если отгрепать весь лог по имени любого парта, что случилось с партом изначально?
источник
01:15пожаловаться#18

D

Dj in ClickHouse не тормозит
Shazo
Если попробовать детач, атач?
не понял, зачем детач/атач?
источник
01:15пожаловаться#19

D

Dj in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
а если отгрепать весь лог по имени любого парта, что случилось с партом изначально?
ок, изначально проблема:
- не были остановлены загрузчики когда сменилась структура таблицы (на кластере)
источник
01:23пожаловаться#20