Size: a a a

ClickHouse не тормозит

2020 May 22

DT

Dmitry Titov in ClickHouse не тормозит
Andrew Kochen
и да, эти GRANT с 20й версии только?
20.3 базово и 20.4 уже лучше емнип
источник

d

daria in ClickHouse не тормозит
у кого-нибудь стоит драйвер clickhouse-odbc на винде? поделитесь, пожалуйста, как у вас выглядит odbc.ini и где он находится? у меня их три, в \Windows, \etc и \Documents, непонятно, который нужный
источник

[K

[IPT] Dmitry Knyazev in ClickHouse не тормозит
Переслано от [IPT] Dmitry Knyazev
ребят, а как в ch/graphite убедится, что запустился?

OPTIMIZE TABLE default.graphite_reverse PARTITION 201906 FINAL

Ok.

0 rows in set. Elapsed: 0.315 sec.
источник

[K

[IPT] Dmitry Knyazev in ClickHouse не тормозит
Переслано от [IPT] Dmitry Knyazev
начитался тут про то, что мерж не эффективно работает, решил попробовать и не понятно как проверить 🤷‍♂️
источник

[K

[IPT] Dmitry Knyazev in ClickHouse не тормозит
Переслано от [IPT] Dmitry Knyazev
источник

[K

[IPT] Dmitry Knyazev in ClickHouse не тормозит
говорят, вроде партов должно стать меньше, но их меньше не становится
источник

[K

[IPT] Dmitry Knyazev in ClickHouse не тормозит
Если OPTIMIZE применяется к таблицам семейства ReplicatedMergeTree, ClickHouse создаёт задачу на мёрж и ожидает её исполнения на всех узлах (если активирована настройка replication_alter_partitions_sync).


где бы эту задачу посмотреть?
источник

SC

Smoked Cheese in ClickHouse не тормозит
в зукипере посмотреть
источник

DA

Dima Admin in ClickHouse не тормозит
[IPT] Dmitry Knyazev
говорят, вроде партов должно стать меньше, но их меньше не становится
возможно уже всё что могло смержиться смержилось. Нужно смотреть схему таблицы

select * from system.merges where database='default' and table='graphite_reverse';


так можно посмотреть что по вашей таблице сейчас мержит
источник

MG

Mikhail Glader in ClickHouse не тормозит
Напомните плз, где в конфиге написано, сколько одновременных инсертов в таблицу можно делать?
источник

PB

Pavel Bulavin in ClickHouse не тормозит
Колеги вопрос по движку ReplacingMergeTree
Создаю таблицу на одной тачке пишу несколько дублей.
Все работает штатно записи схлопываются.
Было три версии одинаковые
1 914219
2 914219
3 914219

OPTIMIZE table test_repl final

3 914219

Если создаю такую же таблицу на 3-х машинах и поверх Distributed
Запись пишется  через Distributed
И вижу что дубли не удаляются.

OPTIMIZE table table test_repl ON CLUSTER
1 405741
2 609460
3 914219

Вижу что судя по всему записи схлопнулить только на каждой тачке отдельно.
Как решить такую проблему?
источник

S

Shazo in ClickHouse не тормозит
3 шарда или 3 реплики?
источник

PB

Pavel Bulavin in ClickHouse не тормозит
3 шарда
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Pavel Bulavin
Колеги вопрос по движку ReplacingMergeTree
Создаю таблицу на одной тачке пишу несколько дублей.
Все работает штатно записи схлопываются.
Было три версии одинаковые
1 914219
2 914219
3 914219

OPTIMIZE table test_repl final

3 914219

Если создаю такую же таблицу на 3-х машинах и поверх Distributed
Запись пишется  через Distributed
И вижу что дубли не удаляются.

OPTIMIZE table table test_repl ON CLUSTER
1 405741
2 609460
3 914219

Вижу что судя по всему записи схлопнулить только на каждой тачке отдельно.
Как решить такую проблему?
шардировать надо по этому ключу, чтобы записи с одинаковым ключом попадали на один и тот же шард
источник
2020 May 23

DC

Denny Crane (I don't... in ClickHouse не тормозит
Mikhail Glader
Напомните плз, где в конфиге написано, сколько одновременных инсертов в таблицу можно делать?
нет такого ограничения, можно ограничить кол-во запросов квотами пользователю и есть max_connections=100
источник

PB

Pavel Bulavin in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
шардировать надо по этому ключу, чтобы записи с одинаковым ключом попадали на один и тот же шард
Понял. Спасибо.
источник

MG

Mikhail Glader in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
нет такого ограничения, можно ограничить кол-во запросов квотами пользователю и есть max_connections=100
У меня клик падает, если вставлять слишком много. Жалуется, что не успевает мерджить.
источник

過酸化水素 in ClickHouse не тормозит
Mikhail Glader
У меня клик падает, если вставлять слишком много. Жалуется, что не успевает мерджить.
вставляй большими кусками
источник

MG

Mikhail Glader in ClickHouse не тормозит
過酸化水素
вставляй большими кусками
Так и делаю. Не помогает.
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Mikhail Glader
У меня клик падает, если вставлять слишком много. Жалуется, что не успевает мерджить.
так и при чем тут конфиг-то?
источник