Size: a a a

ClickHouse не тормозит

2020 May 22

A

Andrey in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
нет никаких крутилок.
uncompressed кеш ничего не стоит, им никто не пользуется, по факту бесполезная вещь, которая очень редко нужна в ситуации типа ch under storm (altinity blog)
не соглашусь. С uncimpressed кешом личто поимел профита выделив этот кеш под пачку юзеров приложений которые дергают определенный небольшой пул таблиц мелкими запросами. Там они прям сильно однотипны были, но помогло прям хорошо.

А про крутилки. Ну если бы все было так просто, то наверное и чата бы этого не было. И тебя самого так часто тут не тегали с вопросами)
источник

И

Инк in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
это пользовательский параметр. Через set ....=1 в сессии либо в профиле пользователя в users.xml
Благодраю!
источник

SK

Svyatoslav Khitrov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Что такое "свой правильный зукипер"?
к которому коннектится кликхаус
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Svyatoslav Khitrov
к которому коннектится кликхаус
Не должно быть никаких своих зк. Все ноды зк образуют ансамбль все они равнозначны и содержат одни теже данные. Все ноды кх должны ходить во все ноды зк. Скорее всего у вас проблема с нодой зк. Проверьте ее состояние echo stat | nc <zookeeper ip> 2181
источник

AR

Alexander Ryzhenko in ClickHouse не тормозит
[2020-05-22 12:34:09] Code: 50, e.displayText() = DB::Exception: Unsupported type Decimal(18, 2) (version 19.15.3.6 (official build))
источник

AR

Alexander Ryzhenko in ClickHouse не тормозит
Alexander Ryzhenko
[2020-05-22 12:34:09] Code: 50, e.displayText() = DB::Exception: Unsupported type Decimal(18, 2) (version 19.15.3.6 (official build))
Наверное Float надо, т.к. функции для извлечения из словаря Decimal, типа dictGetDecimal() нет
источник

i

io in ClickHouse не тормозит
Al T
да вроде уж там... в последних версиях 20.3 и в 20.4
Спасибо!
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Alexander Ryzhenko
Наверное Float надо, т.к. функции для извлечения из словаря Decimal, типа dictGetDecimal() нет
источник

SK

Svyatoslav Khitrov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Не должно быть никаких своих зк. Все ноды зк образуют ансамбль все они равнозначны и содержат одни теже данные. Все ноды кх должны ходить во все ноды зк. Скорее всего у вас проблема с нодой зк. Проверьте ее состояние echo stat | nc <zookeeper ip> 2181
проверял nc -vn ip_address 2181, коннект проходит
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Svyatoslav Khitrov
проверял nc -vn ip_address 2181, коннект проходит
stat выдает состояние. Там несколько строк в одной из них должно быть написано либо leader либо follower
источник

AR

Alexander Ryzhenko in ClickHouse не тормозит
Ясно. Но все равно словарь не хочет создаваться с Deimal64(2)
источник

A

Andrey in ClickHouse не тормозит
Привет, никто не сталкивался с проблемой, что при чтении из kafka, clickhouse получаю ошибку
Code: 190, e.displayText() = DB::Exception: Elements 'string_fields.names' and 'string_fields.values' of Nested data structure 'string_fields' (Array columns) have different array sizes., Stack trace (when copying this message, always include the lines below) (отправили некорректные данные в kafka)
Я думал при значении kafka_skip_broken_messages = 1 сообщение просто пропуститься должно, но оно каждый раз пытается вставиться в бесконечном цикле
Есть еще какие-либо опции у Kafka Engine пропускать невалидные сообщения?
источник

AR

Alexander Ryzhenko in ClickHouse не тормозит
Andrey
Привет, никто не сталкивался с проблемой, что при чтении из kafka, clickhouse получаю ошибку
Code: 190, e.displayText() = DB::Exception: Elements 'string_fields.names' and 'string_fields.values' of Nested data structure 'string_fields' (Array columns) have different array sizes., Stack trace (when copying this message, always include the lines below) (отправили некорректные данные в kafka)
Я думал при значении kafka_skip_broken_messages = 1 сообщение просто пропуститься должно, но оно каждый раз пытается вставиться в бесконечном цикле
Есть еще какие-либо опции у Kafka Engine пропускать невалидные сообщения?
kafka_skip_broken_messages – максимальное количество некорректных сообщений в блоке. Если kafka_skip_broken_messages = N, то движок отбрасывает N сообщений Кафки, которые не получилось обработать.

может, у Вас там больше одного такого сообщения в пачке приходит?
источник

A

Andrey in ClickHouse не тормозит
да, больше одного
источник

A

Andrey in ClickHouse не тормозит
спасибо, установлю больше значение
источник

SK

Svyatoslav Khitrov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
stat выдает состояние. Там несколько строк в одной из них должно быть написано либо leader либо follower
1 лидер, 2 фоловера
источник

ИМ

Илья Максимов... in ClickHouse не тормозит
Здравствуйте, есть ли возможность «пере собрать» данные в mv? Например удалить весь день из статистики, и сказать mv - иди пере собери из своей таблицы ОТ и ДО?
источник

СC

Стас C1rcle in ClickHouse не тормозит
Коллеги, добрый день!
Прошу прощения если уже было, только начал пользоваться ClickHouse, сразу же при простом select * вылетает ошибка.
SQL Error [164]: ClickHouse exception, code: 164, host: , port:  Code: 164, e.displayText() = DB::Exception: Cannot modify 'result_overflow_mode' setting in readonly mode (version 20.3.5.21 (official build))
Что делать?
источник

PR

Petr Ryzhov in ClickHouse не тормозит
Стас C1rcle
Коллеги, добрый день!
Прошу прощения если уже было, только начал пользоваться ClickHouse, сразу же при простом select * вылетает ошибка.
SQL Error [164]: ClickHouse exception, code: 164, host: , port:  Code: 164, e.displayText() = DB::Exception: Cannot modify 'result_overflow_mode' setting in readonly mode (version 20.3.5.21 (official build))
Что делать?
Используете DBeaver?
источник

СC

Стас C1rcle in ClickHouse не тормозит
Petr Ryzhov
Используете DBeaver?
да
источник