MM
tx.user_id -> ts.user_id
Size: a a a
2021 February 02
K
Hi guys I am facing issue to connect clickhouse through Nifi via jdbc on https 8443 port . Https jdbc is working fine .. only face issue on 8443 did anyone face this issue
K
DC
А как КН переносить внезапное отключение виртуалки, в которой он активно работает? Что может приключиться?
потеряются некоторые последние инсерты
MM
потеряются некоторые последние инсерты
А сама БД не попортится?
DC
А сама БД не попортится?
нет
MM
И сервер запустится без ручных манипуляций?
DC
И сервер запустится без ручных манипуляций?
да с вероятностью 99.99999%
MM
Спасибо за отличную новость!
m
Вопрос про мутации
1) Были сделаные 225 мутаций вида update set cola = 2 where colb = 30;
2) Данных порядка 2.5 млрд
3) В system.mutations мутаций которые в процессе — нет, то есть все завершены
4) При этом select показывает еще старые данные
В чем может быть дело? Кроме того что я не правильно сделал select
1) Были сделаные 225 мутаций вида update set cola = 2 where colb = 30;
2) Данных порядка 2.5 млрд
3) В system.mutations мутаций которые в процессе — нет, то есть все завершены
4) При этом select показывает еще старые данные
В чем может быть дело? Кроме того что я не правильно сделал select
DC
Вопрос про мутации
1) Были сделаные 225 мутаций вида update set cola = 2 where colb = 30;
2) Данных порядка 2.5 млрд
3) В system.mutations мутаций которые в процессе — нет, то есть все завершены
4) При этом select показывает еще старые данные
В чем может быть дело? Кроме того что я не правильно сделал select
1) Были сделаные 225 мутаций вида update set cola = 2 where colb = 30;
2) Данных порядка 2.5 млрд
3) В system.mutations мутаций которые в процессе — нет, то есть все завершены
4) При этом select показывает еще старые данные
В чем может быть дело? Кроме того что я не правильно сделал select
есть 38 багов на эту тему. Давайте начнем с версии КХ. И вы когда-нибудь делали рестор базы? Испольуете clickhouse-backup ?
m
1) 20.12.3.3
2) Не делал через clickhouse-backup, есть просто в tar.gz копии некоторых партов (нужных)
И в догонку еще, — это вот второй шард, а первый шард на нем так же порядка 2.5млрд но там все мутации висят в статусе что они "в процессе", уже минут 25, можно как либо понять может быть косвенно что процесс вообще идёт, ясно что реврайт партов не быстрый процесс
2) Не делал через clickhouse-backup, есть просто в tar.gz копии некоторых партов (нужных)
И в догонку еще, — это вот второй шард, а первый шард на нем так же порядка 2.5млрд но там все мутации висят в статусе что они "в процессе", уже минут 25, можно как либо понять может быть косвенно что процесс вообще идёт, ясно что реврайт партов не быстрый процесс
m
На втором шарде селект стал показывать то что нужно !
m
Успех
DC
1) 20.12.3.3
2) Не делал через clickhouse-backup, есть просто в tar.gz копии некоторых партов (нужных)
И в догонку еще, — это вот второй шард, а первый шард на нем так же порядка 2.5млрд но там все мутации висят в статусе что они "в процессе", уже минут 25, можно как либо понять может быть косвенно что процесс вообще идёт, ясно что реврайт партов не быстрый процесс
2) Не делал через clickhouse-backup, есть просто в tar.gz копии некоторых партов (нужных)
И в догонку еще, — это вот второй шард, а первый шард на нем так же порядка 2.5млрд но там все мутации висят в статусе что они "в процессе", уже минут 25, можно как либо понять может быть косвенно что процесс вообще идёт, ясно что реврайт партов не быстрый процесс
>просто в tar.gz копии
рестор был?
рестор был?
m
Рестора не было
m
В общем на втором шарде всё ок, на первом тупо висят как "в процессе" все мутации :(
DC
Рестора не было
таблица replicated?
все я запутался.
В system.mutations мутаций которые в процессе — нет, то есть все завершены
При этом select показывает еще старые данные
На втором шарде селект стал показывать то что нужно
все я запутался.
В system.mutations мутаций которые в процессе — нет, то есть все завершены
При этом select показывает еще старые данные
На втором шарде селект стал показывать то что нужно
m
Таблица не replicated но на неё смотрит Distributed. Всего 2 шарда на каждому запущено было 225 мутаций. На одном - всё окей, на втором они висят в процессе выполнения. Я думаю что я просто зря сотрясаю воздух и надо подождать, там всё таки 1.2Тб данных
DC
Таблица не replicated но на неё смотрит Distributed. Всего 2 шарда на каждому запущено было 225 мутаций. На одном - всё окей, на втором они висят в процессе выполнения. Я думаю что я просто зря сотрясаю воздух и надо подождать, там всё таки 1.2Тб данных
в system.merges видно мутации и %