Size: a a a

ClickHouse не тормозит

2020 June 17

R

Rail in ClickHouse не тормозит
lnuynxa
ты про оператор от altinity?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Katherine
всем привет! Часто встречается следующая ошибка:
Code: 32. DB::Exception: Attempt to read after eof: while receiving packet from ......
Чаще всего возникает при вставке данных из csv, но были случаи возникновения и при выполнении вставки одной строки через INSERT ... VALUES
Ошибка может возникать на разных таблицах, также может рандомно исчезнуть без изменения ddl таблицы и набора вставляемых данных.
Подскажите, плиз, из-за чего может возникать ошибка и что с этим делать?)
а версия кх? и что в логе кх?
источник

АШ

Алексей Шило... in ClickHouse не тормозит
Привет кто использует связку кафка флинк кликхауз. Поделитесь примером. Нашел iviv.ru clickhose sink но примерв кода нет.
источник

l

lnuynxa in ClickHouse не тормозит
понятия не имею, кто его делал если честно.
Но я знаю, что кто то пользуется оператором от altinity
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Алексей Шило
Привет кто использует связку кафка флинк кликхауз. Поделитесь примером. Нашел iviv.ru clickhose sink но примерв кода нет.
На хабре статья от ivi с примерами
источник

И

Иван in ClickHouse не тормозит
Алексей Шило
Привет кто использует связку кафка флинк кликхауз. Поделитесь примером. Нашел iviv.ru clickhose sink но примерв кода нет.
Там есть jdbc sink но он глупый как пробка. Можно весьма просто имплиментировать свой синк в котором просто батчевать события по размеру пачки/тайм-ауту/памяти занимаемой плюс flush-шить на каждый чекпоинт. Соответственно не стоит делать очень частые чекпоинты, ~10с и больше. (Загляните в код flink+a)
источник

VS

Vladyslav Sakun in ClickHouse не тормозит
Rail
Приветствую, ребят, есть те кто поднимал КХ в кубере с helm? Как там обстоят дела с репликацией? Были ли то какие проблемы с репликами? Может есть где нить в инетах примеры со связкой кх + кубер + helm?
Я использую, но пока трабла с запросами on cluster.
С хостами никак не разберусь
источник

И

Иван in ClickHouse не тормозит
Плюс писать в buffer таблицы чтобы не было слишком много инсертов единомоментно с "мапперов".
плюс есть удобный способ писать не TabSeparated а в бинарном формате, вот сюда https://github.com/ClickHouse/clickhouse-jdbc#send-data-in-binary-formatd-with-custom-user-callback
источник

R

Rail in ClickHouse не тормозит
Vladyslav Sakun
Я использую, но пока трабла с запросами on cluster.
С хостами никак не разберусь
вот сейчас у нас проблема с тем, что в одном кластере один список таблиц, в другом другой, репликация хз как так работает
источник

VS

Vladyslav Sakun in ClickHouse не тормозит
Rail
вот сейчас у нас проблема с тем, что в одном кластере один список таблиц, в другом другой, репликация хз как так работает
Оператор от altinity используешь?
источник

R

Rail in ClickHouse не тормозит
Vladyslav Sakun
Оператор от altinity используешь?
неа, helm только
источник

VS

Vladyslav Sakun in ClickHouse не тормозит
Rail
неа, helm только
Пока не помогу ничем, так как с репликацией проблем нет
источник

R

Rail in ClickHouse не тормозит
Vladyslav Sakun
Пока не помогу ничем, так как с репликацией проблем нет
Это вы оператором пользуетесь?
источник

VS

Vladyslav Sakun in ClickHouse не тормозит
Rail
Это вы оператором пользуетесь?
Пробуем, но пока до конца не настроили кластер, никак DDL запросы не выполняются
источник

R

Rail in ClickHouse не тормозит
Vladyslav Sakun
Пробуем, но пока до конца не настроили кластер, никак DDL запросы не выполняются
видимо проще и прозрачнее без куберов кх на проде с репликами поднимать
источник

VS

Vladyslav Sakun in ClickHouse не тормозит
Rail
видимо проще и прозрачнее без куберов кх на проде с репликами поднимать
Есть такое мнение и у нас 🙂
источник

AT

Al T in ClickHouse не тормозит
многие да, тоже пришли к такому выводу ))
источник

AT

Al T in ClickHouse не тормозит
тем более все равно ему целый сервер надо отдавать
источник

R

Rail in ClickHouse не тормозит
эх, беда с репликами
источник

RS

Roman Skidan in ClickHouse не тормозит
Dmitry Titov
remote() table функция
Получилось сделать через эту функцию. Но подскажите, как быть с join? Составил такой запрос: insert into direction
select
   AirlineName,
   Year,
   FlightDate,
   Carrier,
   OriginCityName,
   OriginStateName,
   DestCityName,
   DestStateName
FROM remote('192.168.1.9:9000', 'default', 'ontime') o INNER join remote('192.168.1.9:9000', 'default', 'dict') d on d.AirlineID = o.AirlineID;
Насколько он корректный?
источник