Size: a a a

ClickHouse не тормозит

2020 June 03

A

Anton in ClickHouse не тормозит
уже что то)
источник

DT

Dmitry Titov in ClickHouse не тормозит
это всякие ulimit -u ulimit -n
источник

DT

Dmitry Titov in ClickHouse не тормозит
и слишком маленькие парты почему то
источник

C

Constantine in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
хост на котором вы запускаете берет из того конфига что показали имена хостов, и кладет в зукипер задания, т.е. в кластере jake есть ch1.domain.net, в зукипере для него появится строчка ch1.domain.net:900 делай то, ch1.domain.net проверяет, опа мне надо сделать то , выполняет ....
спасибо, заработало ))
источник

DT

Dmitry Titov in ClickHouse не тормозит
select database, table, count() from system.parts WHERE active GROUP BY database, table
источник

A

Anton in ClickHouse не тормозит
Dmitry Titov
и слишком маленькие парты почему то
дневные партации у таблицы куда представления переливают
источник

A

Anton in ClickHouse не тормозит
Dmitry Titov
select database, table, count() from system.parts WHERE active GROUP BY database, table
спасибо, видимо с этим предеться разобраться - https://prnt.sc/ssm7ci
источник

DT

Dmitry Titov in ClickHouse не тормозит
Anton
спасибо, видимо с этим предеться разобраться - https://prnt.sc/ssm7ci
дневные партиции это достаточно редкий кейс
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
на самом деле кол-во партов не должно влиять никак

вот дневные, и даже часовые партиции есть на этом сервере

lsof -p 11715|wc -l
333

SELECT count()
FROM system.parts

┌─count()─┐
│   17259 │
└─────────┘
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
я думаю какая-то бага в 20.3 последних, потому что несколько раз за последние 2 недели пришли с "Too many open files" и Stack size too large
источник

A

Anton in ClickHouse не тормозит
Too many open files in system больше нет, но при вставке все то же сообщение
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Anton
Too many open files in system больше нет, но при вставке все то же сообщение
df -i /var/lib
что выдает?
источник

A

Anton in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
df -i /var/lib
что выдает?
Filesystem        Inodes   IUsed     IFree IUse% Mounted on
/dev/vda1      165150720 2407595 162743125    2% /
источник

A

Anton in ClickHouse не тормозит
как оказалось кол-во столбцов я приукрасил, в одной 20 во второй 43
источник

DT

Dmitry Titov in ClickHouse не тормозит
Я бы на самом деле действительно попробовал обновится, мало ли что
источник

A

Anton in ClickHouse не тормозит
Dmitry Titov
Я бы на самом деле действительно попробовал обновится, мало ли что
без изменений к сожалению
источник

A

Anton in ClickHouse не тормозит
Code: 306, e.displayText() = DB::Exception: Stack size too large. Stack address: 0x7f4a7afff000, frame address: 0x7f4a7b3fd640, stack size: 4204992, maximum stack size: 8392704 (version 20.4.4.18 (official build))
источник

DT

Dmitry Titov in ClickHouse не тормозит
Anton
без изменений к сожалению
ну тогда бы вытащил SQL запрос из пхп(до этого поигрался бы с объемом батча) и начал бы мучать через curl
источник

DT

Dmitry Titov in ClickHouse не тормозит
можно еще создать копию таблицы и попробовать вставлять в нее
источник

A

Anton in ClickHouse не тормозит
уже в процессе, спасибо
источник