Size: a a a

ClickHouse не тормозит

2021 February 20

IA

Ilia Ablamonov in ClickHouse не тормозит
Dj
А если перевставить парт в другую такую же таблицу?
перевставить в смысле insert from select или detach/attach partition?
источник

D

Dj in ClickHouse не тормозит
Ilia Ablamonov
перевставить в смысле insert from select или detach/attach partition?
İnsert select
источник

MF

Mihail F in ClickHouse не тормозит
Как вытащить элемент из массива? что-то в доках по массивам не нашел этого.
источник

pk

papa karlo in ClickHouse не тормозит
[]
источник

R

Ruslan in ClickHouse не тормозит
подскажите пожалуйста. при использовании clickhouse-copier можно в секции engine указать другой ключ партиционирования (PARTITION BY) и другой порядок  сортировки (ORDER BY) ? те можно ли при копировании сразу же разложить данные по новому. (схема таблицы не меняется, вопрос именно про секцию engine).
источник

IA

Ilia Ablamonov in ClickHouse не тормозит
Dj
İnsert select
оно еще в процессе, но уже видно, что файлы индексов получаются нормальные, мелкие
источник

D

Dj in ClickHouse не тормозит
Ilia Ablamonov
оно еще в процессе, но уже видно, что файлы индексов получаются нормальные, мелкие
тут проще перевставить парт чем копать, может баг какой-то, либо может быть большим изза адаптивной гранулярности и широкой колонки (убедитесь когда довстваится)
источник

МЧ

Максим Чагин... in ClickHouse не тормозит
А как чистить таблицу system.query_thread_log ? Пробовал TRUNCATE и DROP PARTITION, кидает ошибку

---
1. Size (120.74 GB) is greater than max_[table/partition]_size_to_drop (50.00 GB)
2. File '/var/lib/clickhouse/flags/force_drop_table' intended to force DROP doesn't exist
How to fix this:
1. Either increase (or set to zero) max_[table/partition]_size_to_drop in server config
2. Either create forcing file /var/lib/clickhouse/flags/force_drop_table and make sure that ClickHouse has write permission for it.
Example:
sudo touch '/var/lib/clickhouse/flags/force_drop_table' && sudo chmod 666 '/var/lib/clickhouse/flags/force_drop_table' (version 20.12.5.14 (official build))
источник

DT

Dmitry Titov in ClickHouse не тормозит
Максим Чагин
А как чистить таблицу system.query_thread_log ? Пробовал TRUNCATE и DROP PARTITION, кидает ошибку

---
1. Size (120.74 GB) is greater than max_[table/partition]_size_to_drop (50.00 GB)
2. File '/var/lib/clickhouse/flags/force_drop_table' intended to force DROP doesn't exist
How to fix this:
1. Either increase (or set to zero) max_[table/partition]_size_to_drop in server config
2. Either create forcing file /var/lib/clickhouse/flags/force_drop_table and make sure that ClickHouse has write permission for it.
Example:
sudo touch '/var/lib/clickhouse/flags/force_drop_table' && sudo chmod 666 '/var/lib/clickhouse/flags/force_drop_table' (version 20.12.5.14 (official build))
Кликхаус же подсказывает

sudo touch '/var/lib/clickhouse/flags/force_drop_table' && sudo chmod 666 '/var/lib/clickhouse/flags/force_drop_table
источник

DT

Dmitry Titov in ClickHouse не тормозит
выставите флаг
источник

R

Rus in ClickHouse не тормозит
Народ, посоветуйте пожалуйста годный курс где можно научиться как переезжать в кликхауз с других баз и как наладить трансфер статистики из гугланалитики в кликхауз ?
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Rus
Народ, посоветуйте пожалуйста годный курс где можно научиться как переезжать в кликхауз с других баз и как наладить трансфер статистики из гугланалитики в кликхауз ?
зачем курс?
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
бери и делай
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
да и нет курсов по клику норм
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
вся ьаза знаний в этом чатике
источник

DN

Dmitriy Novikov in ClickHouse не тормозит
Rus
Народ, посоветуйте пожалуйста годный курс где можно научиться как переезжать в кликхауз с других баз и как наладить трансфер статистики из гугланалитики в кликхауз ?
через MS протокло хотите?
источник

AZ

Anton Zhuravsky in ClickHouse не тормозит
Ruslan
подскажите пожалуйста. при использовании clickhouse-copier можно в секции engine указать другой ключ партиционирования (PARTITION BY) и другой порядок  сортировки (ORDER BY) ? те можно ли при копировании сразу же разложить данные по новому. (схема таблицы не меняется, вопрос именно про секцию engine).
Да, и решард можно делать. Правда, готовить кликхаус-копиер надо аккуратно и уметь, иначе будет сильно медленнее, чем тупой insert select
источник

R

Ruslan in ClickHouse не тормозит
Anton Zhuravsky
Да, и решард можно делать. Правда, готовить кликхаус-копиер надо аккуратно и уметь, иначе будет сильно медленнее, чем тупой insert select
спасибо. если не сложно, в двух словах на какие аспекты следует обратить внимание? (я опирался на офф страницу документации и на эту статью - https://github.com/getsentry/snuba/blob/master/docs/clickhouse-copier.md )
источник

AZ

Anton Zhuravsky in ClickHouse не тормозит
Ruslan
спасибо. если не сложно, в двух словах на какие аспекты следует обратить внимание? (я опирался на офф страницу документации и на эту статью - https://github.com/getsentry/snuba/blob/master/docs/clickhouse-copier.md )
Ох, если бы я знал :) Денис, вероятно, может подсказать, за чем следить, но последний раз запущенный аккуратненько по мануалу копиер решардил 1.5тб около 20 часов у нас, без каких-то особых сообщений в логах и пр. Разбираться времени не было от слова совсем, ну я и не стал, но будущее запомнил, что не все так сладко, как обещают.
Короче говоря, если есть возможность - пользуйтесь insert select
источник

R

Ruslan in ClickHouse не тормозит
понял 🙂
источник