Size: a a a

ClickHouse не тормозит

2020 September 04

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
при обновлении 19.16.19.85 -> 20.1.8.41 кликхаус не стартует с такой ошибкой:
2020.09.04 18:50:01.543723 [ 1 ] {} <Error> Application: DB::Exception: Cannot parse input: expected eof before: >: Cannot attach table '`query_log`' from query ATTACH TABLE query_log (`type` Enum8('QueryStart' = 1, 'QueryFinish' = 2, 'ExceptionBeforeStart' = 3, 'ExceptionWhileProcessing' = 4), `event_date` Date, `event_time` DateTime, `query_start_time` DateTime, `query_duration_ms` UInt64, `read_rows` UInt64, `read_bytes` UInt64, `written_rows` UInt64, `written_bytes` UInt64, `result_rows` UInt64, `result_bytes` UInt64, `memory_usage` UInt64, `query` String, `exception` String, `stack_trace` String, `is_initial_query` UInt8, `user` String, `query_id` String, `address` IPv6, `port` UInt16, `initial_user` String, `initial_query_id` String, `initial_address` IPv6, `initial_port` UInt16, `interface` UInt8, `os_user` String, `client_hostname` String, `client_name` String, `client_revision` UInt32, `client_version_major` UInt32, `client_version_minor` UInt32, `client_version_patch` UInt32, `http_method` UInt8, `http_user_agent` String, `quota_key` String, `revision` UInt32, `thread_numbers` Array(UInt32), `os_thread_ids` Array(UInt32), `ProfileEvents.Names` Array(String), `ProfileEvents.Values` Array(UInt64), `Settings.Names` Array(String), `Settings.Values` Array(String)) ENGINE = MergeTree PARTITION BY toYYYYMM(event_date) ORDER BY (event_date, event_time) SETTINGS index_granularity = 1024

никто не сталкивался?
удалить содержимое /metadata/system/ /data/system/ и рестартануть
зачем вам эти логи
источник

S

Shegloff in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
удалить содержимое /metadata/system/ /data/system/ и рестартануть
зачем вам эти логи
он на продовые таблицы точно также ругается, сейчас попробую, но прод как обновлять...
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
он на продовые таблицы точно также ругается, сейчас попробую, но прод как обновлять...
а зачем 20.1 ? и там есть 20.1.16.120

как также? что в любом .sql на который он ругается? вы их скопировали ?
источник

S

Shegloff in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
а зачем 20.1 ? и там есть 20.1.16.120

как также? что в любом .sql на который он ругается? вы их скопировали ?
я хотел 20.3, но там точно такая же ошибка, решил версию поменьше. на тестовом кластере создана вся схема из прода, все таблицы. так вот, при обновлении на 20-ые версии ругается такой ошибкой на все .sql, откатываю на 19.16, все нормально.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
я хотел 20.3, но там точно такая же ошибка, решил версию поменьше. на тестовом кластере создана вся схема из прода, все таблицы. так вот, при обновлении на 20-ые версии ругается такой ошибкой на все .sql, откатываю на 19.16, все нормально.
похоже проблема в config.xml , у вас отредактированные стандартные конфиги?
источник

S

Shegloff in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
похоже проблема в config.xml , у вас отредактированные стандартные конфиги?
да, поищу в config.xml, спасибо
источник

S

Shegloff in ClickHouse не тормозит
может какой-то параметр выпилили, кх его игнорирует, а скобки эти нет?... поищу
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
да, поищу в config.xml, спасибо
вы положите конфиг из пакета и потом ищите какое изменение влияет,

но на самом деле вообще не нужно редактировать никогда config.xml и users.xml
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
все изменения можно добавлять в своих .xml в conf.d / (config.d + users.d)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
может какой-то параметр выпилили, кх его игнорирует, а скобки эти нет?... поищу
у вас похоже xml невалидный
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
и не хватает > (тег не закрыт)
источник

S

Shegloff in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
у вас похоже xml невалидный
невалидный для 20-ых версий, и валидный для 19-ых? 😕
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Shegloff
невалидный для 20-ых версий, и валидный для 19-ых? 😕
да
источник

S

Shegloff in ClickHouse не тормозит
ок, спс
источник

T

T in ClickHouse не тормозит
Всех приветствую, пишу первый раз в этот чат, хотел бы задать вопрос. Сервера имеют два раздела(две точки монтирования), в последствии чего я задал диски в  <storage_configuration>, а также задал политику использования двух дисков. Создал я таблицу с опцией использования этой политики, но записываются данные не равномерно, записи попадают на оба диска. Подскажите пожалуйста, как можно сделать так чтобы, прирост данных на двух дисках был примерно одинаковым?
источник

CO

Chern Oleksander in ClickHouse не тормозит
Всем привет)
источник

CO

Chern Oleksander in ClickHouse не тормозит
А как можно моду посчитать а кх?
источник

DT

Dmitry Titov in ClickHouse не тормозит
Chern Oleksander
А как можно моду посчитать а кх?
topK(N) но она не точная
источник

CO

Chern Oleksander in ClickHouse не тормозит
Спасибо поглядим
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
T
Всех приветствую, пишу первый раз в этот чат, хотел бы задать вопрос. Сервера имеют два раздела(две точки монтирования), в последствии чего я задал диски в  <storage_configuration>, а также задал политику использования двух дисков. Создал я таблицу с опцией использования этой политики, но записываются данные не равномерно, записи попадают на оба диска. Подскажите пожалуйста, как можно сделать так чтобы, прирост данных на двух дисках был примерно одинаковым?
сильно неравномерно? как вы смотрите?
там на уровне партов балансируется, если на одном меньше то пишется на него, если много разом записать то там станет больше.
источник