Size: a a a

ClickHouse не тормозит

2021 February 15

O

Oleg Bazdyrev in ClickHouse не тормозит
а рапсределенные-DDL запросы с какой версии появились?
источник

O

Oleg Bazdyrev in ClickHouse не тормозит
ошибка "DDL background thread is not initialized" связана с отсутствием поддержки?
источник

SC

Sergey Cherkashin in ClickHouse не тормозит
papa karlo
skip_unavailable_shards?
О, спасибо огромное
источник

SP

Sergey Platonov in ClickHouse не тормозит
Добрый день. ПРи вставке данных из файла строки могут содержать символы аналогичные разделителю, как сие решить?
источник

S

Slach in ClickHouse не тормозит
Sergey Platonov
Добрый день. ПРи вставке данных из файла строки могут содержать символы аналогичные разделителю, как сие решить?
TSV
кавычки, эскейпинг через \
от формата вставки зависит
источник

SP

Sergey Platonov in ClickHouse не тормозит
CSVWithNames --format_csv_delimiter="|"
источник

S

Slach in ClickHouse не тормозит
Sergey Platonov
CSVWithNames --format_csv_delimiter="|"
тогда кавычки  или escaping типа такого \|
источник

SP

Sergey Platonov in ClickHouse не тормозит
понятно, значит править на стороне источника. Спасибо!
источник

e

er@essbase.ru in ClickHouse не тормозит
Roman
Есть такой механизм, как AggregateFunction, где можно как бы отложить агрегацию и используются суффиксы -State и -Merge. Подскажите, какие движки таблиц поддерживают это? Если есть Materialized View на движке ReplicatedSummingMergeTree, в нём колонки с типом AggregateFunction, а поверх этих таблиц обычная с движком Distributed, оно будет работать?
что почитать посоветуешь что бы ее осмысленно использовать ? (выглядит как то что я всю жизнь искал )) )
источник

AL

Artem Leonov in ClickHouse не тормозит
Коллеги, привет. А при загрузке данных из Oracle в Clickhouse с дальнейшей визуализацией в grafana какой механизм посоветуете ? Уместен ли будет airflow между ними?
источник

S

Slach in ClickHouse не тормозит
Artem Leonov
Коллеги, привет. А при загрузке данных из Oracle в Clickhouse с дальнейшей визуализацией в grafana какой механизм посоветуете ? Уместен ли будет airflow между ними?
попробуйте
https://clickhouse.tech/docs/en/sql-reference/table-functions/odbc/

все в производительность OCI ODBC драйвера упрется
источник

D

Dj in ClickHouse не тормозит
не надо большие данные через ODBC гонять, там все плохо
источник

e

er@essbase.ru in ClickHouse не тормозит
а как читаются внешние источники если CH кластерный ?
источник

e

er@essbase.ru in ClickHouse не тормозит
Dj
не надо большие данные через ODBC гонять, там все плохо
а через hdfs ?
источник

ИТ

Игорь Трофимов... in ClickHouse не тормозит
Добрый день!
Не подскажите почему такое сообщение вылезает, в топике есть небольшая очередь всегда...
<Warning> StorageKafka (log_сssODB_in_parsed_all): Parsing of message (log_сssODB_in_parsed_all, partition: 70, offset: 56178783296) return no rows.
источник

M

Mishanya in ClickHouse не тормозит
Игорь Трофимов
Добрый день!
Не подскажите почему такое сообщение вылезает, в топике есть небольшая очередь всегда...
<Warning> StorageKafka (log_сssODB_in_parsed_all): Parsing of message (log_сssODB_in_parsed_all, partition: 70, offset: 56178783296) return no rows.
Прям всегда ?
источник

ИТ

Игорь Трофимов... in ClickHouse не тормозит
Mishanya
Прям всегда ?
да и этих ошибок много
источник

ИТ

Игорь Трофимов... in ClickHouse не тормозит
если что выставлен параметр: kafka_skip_broken_messages = 1000
источник

M

Mishanya in ClickHouse не тормозит
Игорь Трофимов
да и этих ошибок много
топик должен постоянно политься, иначе кафка может подумать, что консюмер помер и сделает ребалансировку партиций на другие консьюмеры
источник

ИТ

Игорь Трофимов... in ClickHouse не тормозит
Mishanya
топик должен постоянно политься, иначе кафка может подумать, что консюмер помер и сделает ребалансировку партиций на другие консьюмеры
это я понимаю, а почему return no rows, если на данный момент задержка примерна 200мил.
источник