Size: a a a

ClickHouse не тормозит

2020 July 02

Р

Рустам in ClickHouse не тормозит
Shazo
В ногу?
В кх😄
источник

Р

Рустам in ClickHouse не тормозит
Shazo
В ногу?
Нагрузочное делаю
источник

S

Shazo in ClickHouse не тормозит
предположу что каждый из запросов резервирует память и на каком то этапе не помещаются в лимит на пользователя
источник

Р

Рустам in ClickHouse не тормозит
Shazo
предположу что каждый из запросов резервирует память и на каком то этапе не помещаются в лимит на пользователя
А почему в htop этого не видно?
источник

S

Shazo in ClickHouse не тормозит
хз, мб не успевает отобразить.  мб
источник

D

Dj in ClickHouse не тормозит
Dj
куда смотреть при такой ошибке?
вставка в дистрибютед идет ок, но вываливается это в лог, и количество партов выросло резко.
ЗК живой.

2020.07.02 11:58:20.876006 [ 23371 ] {} <Error> SCHEMA.distributed_table.DirectoryMonitor: Code: 242, e.displayText() = DB::Exception: Received from host01:9000. DB::Exception: Table is in readonly mode. Stack trace:
UPD:

куда смотреть при такой ошибке?
вставка в дистрибютед идет ок, но вываливается это в лог, и количество партов выросло резко.
ЗК живой.

2020.07.02 11:58:20.876006 [ 23371 ] {} <Error> SCHEMA.distributed_table.DirectoryMonitor: Code: 242, e.displayText() = DB::Exception: Received from host01:9000. DB::Exception: Table is in readonly mode. Stack trace:

replication_queue стоит, BackgroundPoolTask забит. Как понять чем забит BackgroundPool?

metrics:
Merge  0
BackgroundPoolTask  16
PartMutation  0
ReplicatedFetch  0
ReplicatedSend  0
ReplicatedChecks  0
ReadonlyReplica  0
LeaderReplica  0
ZooKeeperRequest  0
источник

S

Shazo in ClickHouse не тормозит
Так таблица то в ro?
источник

D

Dj in ClickHouse не тормозит
Shazo
Так таблица то в ro?
ну вопрос был - почему она в ро?
источник

D

Dj in ClickHouse не тормозит
и почему все встало
источник

D

Dj in ClickHouse не тормозит
и чем занят backgroundpool
источник

Р

Рустам in ClickHouse не тормозит
Shazo
хз, мб не успевает отобразить.  мб
Я же без остановки херачу
источник

S

Shazo in ClickHouse не тормозит
Dj
ну вопрос был - почему она в ро?
Думаю тут только логи на момент, когда стало ro
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dj
UPD:

куда смотреть при такой ошибке?
вставка в дистрибютед идет ок, но вываливается это в лог, и количество партов выросло резко.
ЗК живой.

2020.07.02 11:58:20.876006 [ 23371 ] {} <Error> SCHEMA.distributed_table.DirectoryMonitor: Code: 242, e.displayText() = DB::Exception: Received from host01:9000. DB::Exception: Table is in readonly mode. Stack trace:

replication_queue стоит, BackgroundPoolTask забит. Как понять чем забит BackgroundPool?

metrics:
Merge  0
BackgroundPoolTask  16
PartMutation  0
ReplicatedFetch  0
ReplicatedSend  0
ReplicatedChecks  0
ReadonlyReplica  0
LeaderReplica  0
ZooKeeperRequest  0
в логе выше написаны ошибки зк и что таблица переходит в ro
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Рустам
Кто нибудь знает почему clickhouse съедает весь цпу и почти не есть озу(смотрю через htop)но при этом жалуется на то что озу закончилось?
Жалуется? прямо орет? ошибка какая? В сообщении с ошибкой написано какой из лимитов закончился
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Yuri Alexandrovich
Drop table. Ошибка 2020/07/02 07:04:01 code: 241, message: Memory limit (total) exceeded: would use 113.02 GiB (attempt to allocate chunk of 4237536 bytes), maximum: 113.02 GiB: (while reading column site_utmm): (while reading from part /disk1/clickhouse/data/test/%2Einner%2Esends/1593475200_32418_33282_5/ from mark 343 with max_rows_to_read = 8192)
Похоже баг. Я бы тикет завел
источник

Р

Рустам in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Жалуется? прямо орет? ошибка какая? В сообщении с ошибкой написано какой из лимитов закончился
Говорит:  "прекрати пожалуйста"
Memory limit (total) exceeded: would use 28.14 GiB ( attempt to allocate chunk of 4226457 bytes), maximum: 28.14 GiB
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Рустам
Говорит:  "прекрати пожалуйста"
Memory limit (total) exceeded: would use 28.14 GiB ( attempt to allocate chunk of 4226457 bytes), maximum: 28.14 GiB
Есть проблема с неправильным рассчетом total. Если вы тестируете кх то я бы взял 20.6. Какая у вас версия кх?
источник

Р

Рустам in ClickHouse не тормозит
источник

YA

Yuri Alexandrovich in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Похоже баг. Я бы тикет завел
тикет на github?
источник

Р

Рустам in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Есть проблема с неправильным рассчетом total. Если вы тестируете кх то я бы взял 20.6. Какая у вас версия кх?
👆
источник