Size: a a a

ClickHouse не тормозит

2020 June 29

BB

Bral Bral in ClickHouse не тормозит
Dj
перелейте руками. наверно можно попробовать detach partition -> attach part (в новую), но это неточно
я про это думал, @den_crane  сказал выше, что так нельзя.
источник

D

Dj in ClickHouse не тормозит
Bral Bral
я про это думал, @den_crane  сказал выше, что так нельзя.
Он сказал что без боли нельзя - это такое себе нечеткое понятие ) может у него болевой порог ниже?
источник

BB

Bral Bral in ClickHouse не тормозит
Dj
Он сказал что без боли нельзя - это такое себе нечеткое понятие ) может у него болевой порог ниже?
Ну на мой взгляд, attach /detach это как раз без боли, в отличии от insert select )
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
как минимум парты по разному называться будут
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
attach partition проверяет структуру
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
даже если парт переименовать

DB::Exception: While loading part /var/lib/clickhouse/data/dw/Y/detached/attaching_202006_1_1_0/: calculated partition ID: 20200629 differs from partition ID in part name: 202006.
источник

D

Dj in ClickHouse не тормозит
Ну, боль с переименованием да
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
можно переименовать все парты, пересчитать partition.dat , и пересчитать файлы котнтрольных сумм (но возможно partition.dat не входит в контрольные суммы, я не уверен)
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
в partition.dat лежит 20200629 а надо 202006
источник

A

Alex in ClickHouse не тормозит
Всем привет! Может, кто подскажет, есть в ClickHouse какой-нибудь лог подключений/соединений?
источник

BB

Bral Bral in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
в partition.dat лежит 20200629 а надо 202006
благодарю. в таком случае, если хотя без какого-нибудь скрипта, который частично это реализует, проще будет insert select.
источник

TF

Terry Filch in ClickHouse не тормозит
господа, а есть ли дашборд нативный от яндекса для графаны? который рисует графики по нативным метрикам кх
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Alex
Всем привет! Может, кто подскажет, есть в ClickHouse какой-нибудь лог подключений/соединений?
в режиме debug все логируется в текстовом логе. И можно влючить логирование запросов в таблицу query_log
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Terry Filch
господа, а есть ли дашборд нативный от яндекса для графаны? который рисует графики по нативным метрикам кх
нету, его рисует @BloodJazMan (спросите у него) , альтинити
источник

A

Alex in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
в режиме debug все логируется в текстовом логе. И можно влючить логирование запросов в таблицу query_log
Уже включил, сейчас попробую поставить уровень debug. Спасибо большое!
источник

TF

Terry Filch in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
нету, его рисует @BloodJazMan (спросите у него) , альтинити
спс
источник

RO

Required Optional in ClickHouse не тормозит
@den_crane Такой вопрос: Я беру перегоняю данные с одной таблицы в другую поставил в консоли SET max_thread_number = 1 но до конца не перетягивает - с ошибкой Cannot open file ... errno: 24, strerror: Too many open files. Можно ли починить?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Required Optional
@den_crane Такой вопрос: Я беру перегоняю данные с одной таблицы в другую поставил в консоли SET max_thread_number = 1 но до конца не перетягивает - с ошибкой Cannot open file ... errno: 24, strerror: Too many open files. Можно ли починить?
SET max_threads ?

ну баг в конкретной версии кх, не должно быть такой ошибки, у КХ 260тыс. файлов по дефолту
источник

RO

Required Optional in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
SET max_threads ?

ну баг в конкретной версии кх, не должно быть такой ошибки, у КХ 260тыс. файлов по дефолту
а где прописывается?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Required Optional
а где прописывается?
/etc/security/limits.d/clickhouse.conf
источник