Size: a a a

ClickHouse не тормозит

2020 September 28

pk

papa karlo in ClickHouse не тормозит
делаете на одном кластере distributed, которая смотрит в таблицу на другом кластере null, которая смотрит в matview
источник

v

vladamir in ClickHouse не тормозит
спасибо
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
vladamir
Всем привет! А возможно как-то сделать мат.вью на другом кластере?) Вставляю в один кластер - а мат вью генерируется на другом 🤓 Может какая то магия может быть с remote-функциями?
можно с помощью MV ловить инсерты на кластере A и инсертить в таблицу T на кластере B
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
create table yyy as remote(host,db,T)

create materialized view xxx to yyy as select ....
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Grigory Narizhnyy
2020.09.28 13:44:45.496187 [ 164 ] {} <Error> schema.tablename (ReplicatedMergeTreePartCheckThread): No replica has part covering all_294_294_0 and a merge is impossible: we didn't find smaller parts with either the same min block or the same max block.
2020.09.28 13:44:45.497060 [ 164 ] {} <Error> schema.tablename (ReplicatedMergeTreePartCheckThread): Part all_294_294_0 is lost forever.
Gleb https://github.com/ClickHouse/ClickHouse/issues/14296#issuecomment-684020474

все банально. Скорее всего из-за рестарта железки потерялся только-что созданный парт. Информацию о нем нужно как угодно удалить из зукипера.
источник

G

Gleb in ClickHouse не тормозит
да был рестарт
источник

G

Gleb in ClickHouse не тормозит
таких партов много в ошибках
источник

G

Gleb in ClickHouse не тормозит
и терять их не очень хотелось бы
источник

G

Gleb in ClickHouse не тормозит
те текущая конфигурация не обеспечивает надежное хранение?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Gleb
и терять их не очень хотелось бы
КХ не делает fsync , они не записаны на диск и находятся только в памяти.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
надо стараться делать нормальную репликацию
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
чтобы рестарт железки ни влиял на данные
источник

G

Gleb in ClickHouse не тормозит
а вот тут по подробнее, как это сделать?
источник

G

Gleb in ClickHouse не тормозит
кафка льет в таблицы локально
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Gleb
кафка льет в таблицы локально
проще всего конечно не ребутить сервак внезапно.

и сколько пинг до реплики? сколько absolute_delay в system.replica ?
источник

G

Gleb in ClickHouse не тормозит
пинг минимальный, 0-1
источник

G

Gleb in ClickHouse не тормозит
в одном коммутаторе все
источник

G

Gleb in ClickHouse не тормозит
в system.replica сейчасх поищу, не меняли, по умолчанию их конфига альтинити
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Gleb
в одном коммутаторе все
ну вырубаются-то они не вместе надеюсь? или у них и ИБП один?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Gleb
в system.replica сейчасх поищу, не меняли, по умолчанию их конфига альтинити
это не настройка, это метрика
источник