Size: a a a

ClickHouse не тормозит

2020 July 01

BK

Bogdan Kurnosov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
что вы подразумеваете под равномерно? ReplicatedMergeTree ничего не знает про шардирование.
У вас запись как осуществляется? Через Distributed ? там задан ключ шардирования? Будет новый ключ шардирования?
запись напрямую в шарды производится (то есть не через distributed)
под равномерно я подразумеваю как в рамках тех же шардов скопировать старые данные из одной таблицы в другую без дублирования
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Bogdan Kurnosov
запись напрямую в шарды производится (то есть не через distributed)
под равномерно я подразумеваю как в рамках тех же шардов скопировать старые данные из одной таблицы в другую без дублирования
я не очень понимаю в чем вопрос.

варианты (с другом они не связаны, это не шаги)

a) Например у вас партиционирование по месяцу
Начинаете лить в таблицу2 15июля
1 августа дропаете партицию илюль в таблице2
переливаете из таблицы1 в таблицу2 все что меньше августа

b) тоже самое но удаляете alter delete <16 июля и переливаете все что меньше 16

с) вставляете в таблицу2 только те записи что >16 июля

d) останавливаете заливку на секунду. Делаете freeze таблицы1, монтируете freeze в таблицу_temp, запускаете заливку в обе таблицы1,2 переливаете из таблица_temp в таблица2

e) делаете MV на таблицу1 которое вставляет в таблицу2 c where insert_date > 16 июля, переливаете все что меньше 16

...
источник

BK

Bogdan Kurnosov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
я не очень понимаю в чем вопрос.

варианты (с другом они не связаны, это не шаги)

a) Например у вас партиционирование по месяцу
Начинаете лить в таблицу2 15июля
1 августа дропаете партицию илюль в таблице2
переливаете из таблицы1 в таблицу2 все что меньше августа

b) тоже самое но удаляете alter delete <16 июля и переливаете все что меньше 16

с) вставляете в таблицу2 только те записи что >16 июля

d) останавливаете заливку на секунду. Делаете freeze таблицы1, монтируете freeze в таблицу_temp, запускаете заливку в обе таблицы1,2 переливаете из таблица_temp в таблица2

e) делаете MV на таблицу1 которое вставляет в таблицу2 c where insert_date > 16 июля, переливаете все что меньше 16

...
а можно ли средствами кликхауса копировать данные в риалтайме которые вставили в одну таблицу сразу в другую таблицу?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Bogdan Kurnosov
а можно ли средствами кликхауса копировать данные в риалтайме которые вставили в одну таблицу сразу в другую таблицу?
e)
источник

BK

Bogdan Kurnosov in ClickHouse не тормозит
а, всё понял, MV = Materialized View
этот вариант как раз сейчас изучаю
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Bogdan Kurnosov
а, всё понял, MV = Materialized View
этот вариант как раз сейчас изучаю
e) create materialized view xxxx_mv to таблица2 select * from таблица1 where insert_date >= 16 июля
источник

BK

Bogdan Kurnosov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
e) create materialized view xxxx_mv to таблица2 select * from таблица1 where insert_date >= 16 июля
👍 супер, спасибо
это то что нужно
источник

IE

Ivan EKbfh in ClickHouse не тормозит
Добрый день!
не могу понять, откуда у меня появляется HOST LOCAL, если дефолт ANY
юзер приходит из users.xml
источник

IE

Ivan EKbfh in ClickHouse не тормозит
источник

SC

Smoked Cheese in ClickHouse не тормозит
там же у тебя написано <ip>127.0.0.1</ip>
источник

IE

Ivan EKbfh in ClickHouse не тормозит
Это внутри докер обрраза, т.е. изнутри я могу зайти в кх, а снаружи уже никак
источник

IE

Ivan EKbfh in ClickHouse не тормозит
Smoked Cheese
там же у тебя написано <ip>127.0.0.1</ip>
но есть и вторая строка, где сеть?
источник

SC

Smoked Cheese in ClickHouse не тормозит
есть
источник

IE

Ivan EKbfh in ClickHouse не тормозит
она тоже должна работать? ПО крайней мере, работает в обычной версии у меня
источник

SC

Smoked Cheese in ClickHouse не тормозит
должна
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Ivan EKbfh
Добрый день!
не могу понять, откуда у меня появляется HOST LOCAL, если дефолт ANY
юзер приходит из users.xml
в чем вопрос? show create user показывает мусор для старых пользователей созданных через xml?
источник

IE

Ivan EKbfh in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
в чем вопрос? show create user показывает мусор для старых пользователей созданных через xml?
почему он показывает local я понял, видимо.
Не могу найти, почему не могу подключиться из соседних контейнеров к серверу. Смущает то, что ошибка "неверный пароль или нет юзера", а не "запрещено по ip"
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Ivan EKbfh
почему он показывает local я понял, видимо.
Не могу найти, почему не могу подключиться из соседних контейнеров к серверу. Смущает то, что ошибка "неверный пароль или нет юзера", а не "запрещено по ip"
это стандартное поведение всех приложений -- не раскрывать информацию интрудеру
источник

VB

Vladimir Bunchuk in ClickHouse не тормозит
Ребят, малость накосячили с переносом данных на другой кластер.
Есть две реплики и обе не являются лидерами. Можно как-то сделать одну из них лидером?
источник

DT

Dmitry Titov in ClickHouse не тормозит
Vladimir Bunchuk
Ребят, малость накосячили с переносом данных на другой кластер.
Есть две реплики и обе не являются лидерами. Можно как-то сделать одну из них лидером?
реплика лидер влияет только на то, может назначать реплика мержи или нет, емнип
Ну и детачить парты можно только с лидера
источник