В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4226 membersпожаловаться на группу
2020 August 27

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
по идее состав партов и партиций на репликах идентичен
select count() from remote('leaderhost',system.parts) where name like '20200825-10-0_%';
- 0

select count() from remote('nonleaderhost',system.parts) where name like '20200825-10-0_%';
- 17757 (все неактивные)

replication_queue пуст
в зукипере его нет тоже.
в логах ну вообще ничего по этим буквам
источник
20:23пожаловаться#1

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
и что в логе если делать drop partition снова?
на нелидере? ок ща
источник
20:24пожаловаться#2

DC

Denny Crane [not a Y... in ClickHouse не тормозит
т.е. неактивные парты не удалились?
источник
20:24пожаловаться#3

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
т.е. неактивные парты не удалились?
2020.08.27 20:24:38.341311 [ 20857 ] {} <Information> SCHEMA.table: Removed 17757 parts inside 20200825-10-0_0_14705_999999999.

в логе кроме этого пусто
источник
20:25пожаловаться#4

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
т.е. неактивные парты не удалились?
не удалились
источник
20:26пожаловаться#5

D

Dj in ClickHouse не тормозит
совсем
источник
20:26пожаловаться#6

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
т.е. неактивные парты не удалились?
ошибок нет тоже (
источник
20:27пожаловаться#7

DC

Denny Crane [not a Y... in ClickHouse не тормозит
странно все это , drop удаляет сразу, он не делает парты неактивными

ну можно сказать detach table / attach
тогда кх эти парты переложит в detached
источник
20:28пожаловаться#8

D

Dj in ClickHouse не тормозит
detach table  or partition?
источник
20:29пожаловаться#9

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
странно все это , drop удаляет сразу, он не делает парты неактивными

ну можно сказать detach table / attach
тогда кх эти парты переложит в detached
собственно детач+дроп то и работал...
источник
20:31пожаловаться#10

D

Dj in ClickHouse не тормозит
в общем так работает...
источник
20:32пожаловаться#11

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
странно все это , drop удаляет сразу, он не делает парты неактивными

ну можно сказать detach table / attach
тогда кх эти парты переложит в detached
Detaching 20200825-10-0_1851_1851_0


и так 17 тыс раз, после этого дроп детачед
источник
20:33пожаловаться#12

D

Dj in ClickHouse не тормозит
видимо какой-то воркер удаления папок умирает все же
источник
20:33пожаловаться#13

DC

Denny Crane [not a Y... in ClickHouse не тормозит
detach table / attach table просто пересоздает таблицу в памяти (в system.parts) сканирует весь каталог и разбирает какие парты лишние, каких не хватает
источник
20:35пожаловаться#14

A

Artem in ClickHouse не тормозит
Привет. Если PRIMARY KEY всегда висит в памяти для всей таблицы, то возникает вопрос: он висит в памяти в сжатом виде или распакованном?
источник
21:08пожаловаться#15

DC

Denny Crane [not a Y... in ClickHouse не тормозит
в распакованном
источник
21:09пожаловаться#16

DC

Denny Crane [not a Y... in ClickHouse не тормозит
он и на диске вроде тоже несжат
источник
21:10пожаловаться#17

A

Artem in ClickHouse не тормозит
Посмотреть его размер можно, просуммировав соответствующую колонку в system.parts, правильно?
источник
21:11пожаловаться#18

DC

Denny Crane [not a Y... in ClickHouse не тормозит
да не сжат
create table testi(A String) Engine MergeTree order by A;
insert into testi select 'AzAxazxdfg' from numbers(16384)

strings /var/lib/clickhouse/data/default/testi/all_1_1_0/primary.idx
AzAxazxdfg
AzAxazxdfg
AzAxazxdfg
источник
21:12пожаловаться#19

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Artem
Посмотреть его размер можно, просуммировав соответствующую колонку в system.parts, правильно?
да
источник
21:12пожаловаться#20