Size: a a a

ClickHouse не тормозит

2020 July 28

P

PAS in ClickHouse не тормозит
теперь max_server_memory_usage_to_ram_ratio ?
источник

D

Dj in ClickHouse не тормозит
PAS
теперь max_server_memory_usage_to_ram_ratio ?
источник

GZ

Galym Zharyssov in ClickHouse не тормозит
Подскажите пожалуйста как убрать/увеличить memory_limit в кх в докере
источник

S

Slach in ClickHouse не тормозит
Galym Zharyssov
Подскажите пожалуйста как убрать/увеличить memory_limit в кх в докере
через монтировние кастомного конфига в /etc/clickhouse-server/config.d/ и /etc/clickhouse-server/users.d/
источник

S

Slach in ClickHouse не тормозит
Galym Zharyssov
Подскажите пожалуйста как убрать/увеличить memory_limit в кх в докере
хостовая OS для докера какая? OSX \ windows \ linux?
источник

ИГ

Иван Григорьев... in ClickHouse не тормозит
Привет. Хочу перенести данные с нескольких баз данных Oracle в одну ClickHouse для вывода в Grafana. Несколько вопросов: есть сущности Сотрудник и Действия (исторические данные), в кликхаусе как хранить их, раздельно или в одной таблице?
источник

S

Slach in ClickHouse не тормозит
Иван Григорьев
Привет. Хочу перенести данные с нескольких баз данных Oracle в одну ClickHouse для вывода в Grafana. Несколько вопросов: есть сущности Сотрудник и Действия (исторические данные), в кликхаусе как хранить их, раздельно или в одной таблице?
лучше в одной и JOIN на стороне Oracle делать перед заливкой

но можно и через dictGet + создание ODBC словаря ссылающегося на таблицу Сотрудник в ORACLE сделать
источник

ИГ

Иван Григорьев... in ClickHouse не тормозит
Некоторые данные раз в месяц данные надо дополнять. Если я буду хранить дату последнего импорта и с нее дополнять, это корректно?
источник

ИГ

Иван Григорьев... in ClickHouse не тормозит
Slach
лучше в одной и JOIN на стороне Oracle делать перед заливкой

но можно и через dictGet + создание ODBC словаря ссылающегося на таблицу Сотрудник в ORACLE сделать
спасибо
источник

GZ

Galym Zharyssov in ClickHouse не тормозит
Slach
хостовая OS для докера какая? OSX \ windows \ linux?
Linux
источник

P

PAS in ClickHouse не тормозит
а в чём эти значения?
источник

P

PAS in ClickHouse не тормозит
какие тут единицы, байты, кб, мб, гб?
источник

S

Slach in ClickHouse не тормозит
Galym Zharyssov
Linux
ну тогда обычные volume и пробрасывайте конфиг какой вам хочется в users.d и config.d
источник

S

Slach in ClickHouse не тормозит
PAS
какие тут единицы, байты, кб, мб, гб?
байты
источник

D

Dj in ClickHouse не тормозит
PAS
какие тут единицы, байты, кб, мб, гб?
новый КХ понимает аббревиатуры M, G итд, можно писать 10G вроде
источник

P

PAS in ClickHouse не тормозит
Dj
новый КХ понимает аббревиатуры M, G итд, можно писать 10G вроде
источник

P

PAS in ClickHouse не тормозит
2020.07.28 11:00:55.118813 [ 4489 ] {} <Error> Application: Syntax error: Not a valid unsigned integer: 30G
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
PAS
в новых версиях убрали max_memory_usage  ?
Нет. Убрали max_memory_for_all
источник

E

Eugeny in ClickHouse не тормозит
Снова привет. Развалился кластер кликхауса, не могу понять как восстановить. Сетап: 3 кликхауса разных версий, (20.3.8.53, 20.5.3.27, 20.5.2.7), 3 zookeeper'а и ReplicatedReplacingMergeTree таблица небольшого объема (3.7 Гб).
Вчера было отключение электричества в ДЦ, выключились две из трёх нод зукипера и все ноды кликхауса.

После включения на всех нодах в логах:
 <Error> Application: DB::Exception: Existing table metadata in ZooKeeper differs in index granularity bytes. Stored in ZooKeeper: 10485760, local: 0: Cannot attach table `db`.`Table` from metadata file
, ни одна из нод не стартует. В metadata/db/table.sql на всех нодах: SETTINGS index_granularity = 8192

Метаданные в зукипере:
metadata format version: 1
date column:
sampling expression:
index granularity: 8192
mode: 5
sign column:
primary key: TradeDate, Strategy, Acc, Sub, Oid, Seq
data format version: 1
partition key: TradeDate
granularity bytes: 10485760
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Eugeny
Снова привет. Развалился кластер кликхауса, не могу понять как восстановить. Сетап: 3 кликхауса разных версий, (20.3.8.53, 20.5.3.27, 20.5.2.7), 3 zookeeper'а и ReplicatedReplacingMergeTree таблица небольшого объема (3.7 Гб).
Вчера было отключение электричества в ДЦ, выключились две из трёх нод зукипера и все ноды кликхауса.

После включения на всех нодах в логах:
 <Error> Application: DB::Exception: Existing table metadata in ZooKeeper differs in index granularity bytes. Stored in ZooKeeper: 10485760, local: 0: Cannot attach table `db`.`Table` from metadata file
, ни одна из нод не стартует. В metadata/db/table.sql на всех нодах: SETTINGS index_granularity = 8192

Метаданные в зукипере:
metadata format version: 1
date column:
sampling expression:
index granularity: 8192
mode: 5
sign column:
primary key: TradeDate, Strategy, Acc, Sub, Oid, Seq
data format version: 1
partition key: TradeDate
granularity bytes: 10485760
в config.xml в секцию merge_tree enable_mixed_granularity_parts=1
источник