Size: a a a

ClickHouse не тормозит

2020 July 08

DC

Denny Crane (I don't... in ClickHouse не тормозит
Aleksandr Evsigneev
Ну в логе пишет типо "Selected 2 parts by date, 2 parts by key, 2 marks to read from 2 ranges" и всё. Но названий какие конкретно партиции прочитались не пишет.
Судя по данным в таблице и запросу - эти цифры похожи на правду и то что мне надо, но хотелось бы узнать прям названия партиций какие при селекте прочитались
тогда наверное нигде, можно выбрать виртуальный столбец _part, но это ни о чем не говорит
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Required Optional
только вот блоков из 36 стало 46... проверяю на дупликаты
блоков ?  партов в партиции?
источник

AE

Aleksandr Evsigneev in ClickHouse не тормозит
эх
источник

RO

Required Optional in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
блоков ?  партов в партиции?
ну да parts in partitions
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Required Optional
ну да parts in partitions
инсерты идут?
место на диске есть ? сколько размер у этих 36 партов суммарный?
источник

RO

Required Optional in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
инсерты идут?
место на диске есть ? сколько размер у этих 36 партов суммарный?
да я сравнил по количеству линий до и после - все норм.
источник

A

Alexey in ClickHouse не тормозит
Всем привет! Вопрос не совсем по clickhouse, но вдруг кто знает. Tableau поддерживает Live connection к clickhouse? В Power BI насколько я понимаю clickhouse можно приконнектить только через odbc, а такой тип коннекшена не поддерживает Live. Хочу понять что с этим в Tableau
источник

AZ

Alexander Zaitsev in ClickHouse не тормозит
Alexey
Всем привет! Вопрос не совсем по clickhouse, но вдруг кто знает. Tableau поддерживает Live connection к clickhouse? В Power BI насколько я понимаю clickhouse можно приконнектить только через odbc, а такой тип коннекшена не поддерживает Live. Хочу понять что с этим в Tableau
Поддерживает
источник

AZ

Alexander Zaitsev in ClickHouse не тормозит
Вернее, Табло тоже работает через ODBC, но в отличие от PowerBI делает нормальный Live через ODBC
источник

A

Alexey in ClickHouse не тормозит
Alexander Zaitsev
Вернее, Табло тоже работает через ODBC, но в отличие от PowerBI делает нормальный Live через ODBC
Круто! Спасибо
источник

MP

Mikhail Petrov in ClickHouse не тормозит
Привет.

У меня на одной реплике внезапно несколько таблиц начали кричать, что
DB::Exception: Table columns structure in ZooKeeper is different from local table structure

Никакой разницы между данными в ZK /clickhouse/tables/{shard}/tablename/ и metadata/db/tablename.sql сходу не нашел.

Куда можно еще посмотреть? Что еще проверяется во время  StorageReplicatedMergeTree::checkTableStructure ?

Я так понял - во время какого-то большого мерджа реплика упала.
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Mikhail Petrov
Привет.

У меня на одной реплике внезапно несколько таблиц начали кричать, что
DB::Exception: Table columns structure in ZooKeeper is different from local table structure

Никакой разницы между данными в ZK /clickhouse/tables/{shard}/tablename/ и metadata/db/tablename.sql сходу не нашел.

Куда можно еще посмотреть? Что еще проверяется во время  StorageReplicatedMergeTree::checkTableStructure ?

Я так понял - во время какого-то большого мерджа реплика упала.
был баг в КХ, там толи пробелы неправильно записывались в зк или что-то такое. Лечится агрейдом до последнего 20.3
источник

MP

Mikhail Petrov in ClickHouse не тормозит
магия, как я с задержкой в несколько месяцев раз в полгода-год попадаю на такие баги.
источник

VM

Vadim Metikov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
тогда наверное нигде, можно выбрать виртуальный столбец _part, но это ни о чем не говорит
А какие ещё есть виртуальные столбцы?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Vadim Metikov
А какие ещё есть виртуальные столбцы?
в разных движках разные

в mergtree
|| column_name == "_part"
           || column_name == "_part_index"
           || column_name == "_partition_id"
           || column_name == "_sample_factor";
источник

VM

Vadim Metikov in ClickHouse не тормозит
Спасибо
источник
2020 July 09

b

blkmrkt in ClickHouse не тормозит
Удаляю дефолтного юзера в КХ, как сказано на stackoverflow, добавляя вот это в <users /> внутри config.xml:
<default remove="remove">
</default>

Получаю:
DB::Exception: Either 'password' or 'password_sha256_hex' must be specified for user default.

Как так то?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
blkmrkt
Удаляю дефолтного юзера в КХ, как сказано на stackoverflow, добавляя вот это в <users /> внутри config.xml:
<default remove="remove">
</default>

Получаю:
DB::Exception: Either 'password' or 'password_sha256_hex' must be specified for user default.

Как так то?
почему config.xml ? это в users
источник

b

blkmrkt in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
почему config.xml ? это в users
У нас тут своя атмосфера: запускаем бинарники серверов внутри tmux прямиком из билда средствами nixpkgs. Вот я и запускаю сервер вручную, указывая путь к одному конфигу. Не знал что для юзеров отдельный файл должен быть, а странно - вроде бы директива есть в основном config.xml, почему там нельзя описывать юзеров?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
blkmrkt
У нас тут своя атмосфера: запускаем бинарники серверов внутри tmux прямиком из билда средствами nixpkgs. Вот я и запускаю сервер вручную, указывая путь к одному конфигу. Не знал что для юзеров отдельный файл должен быть, а странно - вроде бы директива есть в основном config.xml, почему там нельзя описывать юзеров?
по кочену
источник