В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

3913 membersпожаловаться на группу
2020 May 19

a

alexeysh RnD in ClickHouse не тормозит
Yuri Velgosha
Кажись вряд ли... А долго данные переносятся? Ибо в это случае есть вариант накапливать актуальные данные в буфере, типа кафки, а уж потом их долить после переноса данных из старой структуры.
уже час и судя по всему еще 4, Я думал про матвью с этим целями
источник
21:23пожаловаться#1

YV

Yuri Velgosha in ClickHouse не тормозит
Ну или MV тоже сгодится.. Можно актуальные данные сразу в MV лить, а старые сделать через POPULATE...
источник
21:24пожаловаться#2

a

alexeysh RnD in ClickHouse не тормозит
Yuri Velgosha
Ну или MV тоже сгодится.. Можно актуальные данные сразу в MV лить, а старые сделать через POPULATE...
"Не рекомендуется использовать POPULATE, так как вставляемые в таблицу данные во время создания представления, не попадут в него."
источник
21:26пожаловаться#3

a

alexeysh RnD in ClickHouse не тормозит
это отсюда https://clickhouse.tech/docs/ru/sql-reference/statements/create/#create-view
clickhouse.tech
CREATE - Документация ClickHouse
CREATE DATABASE Создает базу данных. CREATE DATABASE [IF NOT EXISTS] db_name [ON CLUSTER cluster] [ENGINE = engine(...)]
источник
21:27пожаловаться#4

a

alexeysh RnD in ClickHouse не тормозит
или можно как-то по-другому POPULATE?
источник
21:27пожаловаться#5

DC

Denny Crane (I don't... in ClickHouse не тормозит
alexeysh RnD
Добрый вечер!
При создании таблицы неверно указал ключ партиционирования.
Сделал правильную.  Надо перенести данные.
insert from select работает очень медленно.

(1.03 million rows/s., 184.74 MB/s.)

можно это как-то ускорить?
версия КХ ?

--max_insert_threads=16
источник
21:38пожаловаться#6

a

alexeysh RnD in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
версия КХ ?

--max_insert_threads=16
19.9.5
источник
21:39пожаловаться#7

DC

Denny Crane (I don't... in ClickHouse не тормозит
alexeysh RnD
19.9.5
тогда просто кусками в параллень, одновременно запускать январь, февраль, март.
источник
21:40пожаловаться#8

a

alexeysh RnD in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
тогда просто кусками в параллень, одновременно запускать январь, февраль, март.
спасибо, попробую
источник
21:41пожаловаться#9

a

alexeysh RnD in ClickHouse не тормозит
Когда кликхаус показывает скорость выполнения - это же разархивированные данные?
источник
21:51пожаловаться#10

DC

Denny Crane (I don't... in ClickHouse не тормозит
да. Медленно 1.03 million rows/s (хотя на самом деле это нифига не медленно, потому что при обычных вставках это не медленно) потому что вставка однопоточная и используется одно ядро для сортировки вставленного парта.
источник
21:56пожаловаться#11

a

alexeysh RnD in ClickHouse не тормозит
ну для кликхауса медленно )
источник
21:58пожаловаться#12

AP

Abi Palagashvili in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
drop партиции синхронный
а если делать alter table delete where, чтобы дождаться полного удаления данных, нужно указывать в запросе replication_alter_partitions_sync=2?
источник
23:24пожаловаться#13

DC

Denny Crane (I don't... in ClickHouse не тормозит
Abi Palagashvili
а если делать alter table delete where, чтобы дождаться полного удаления данных, нужно указывать в запросе replication_alter_partitions_sync=2?
SETTINGS mutations_sync=2
источник
23:26пожаловаться#14

DC

Denny Crane (I don't... in ClickHouse не тормозит
M(SettingUInt64, mutations_sync, 0, "Wait for synchronous execution of ALTER TABLE UPDATE/DELETE queries (mutations). 0 - execute asynchronously. 1 - wait current server. 2 - wait all replicas if they exist.", 0) \
источник
23:26пожаловаться#15

DC

Denny Crane (I don't... in ClickHouse не тормозит
M(SettingUInt64, replication_alter_partitions_sync, 1, "Wait for actions to manipulate the partitions. 0 - do not wait, 1 - wait for execution only of itself, 2 - wait for everyone.", 0) \
источник
23:27пожаловаться#16

DC

Denny Crane (I don't... in ClickHouse не тормозит
replication_alter_partitions_sync -- это для alter-в структуры таблицы modify column и т.д.
источник
23:28пожаловаться#17

AP

Abi Palagashvili in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
SETTINGS mutations_sync=2
Code: 115, e.displayText() = DB::Exception: Unknown setting mutations_sync (version 19.16.3.6)
источник
23:36пожаловаться#18

AP

Abi Palagashvili in ClickHouse не тормозит
мне обновиться надо?
источник
23:36пожаловаться#19

AP

Abi Palagashvili in ClickHouse не тормозит
v20.3
источник
23:36пожаловаться#20