Size: a a a

ClickHouse не тормозит

2021 February 12

Н

Николай in ClickHouse не тормозит
клик уже с 1с работает?
источник

Н

Николай in ClickHouse не тормозит
вау
источник

I

Ilya in ClickHouse не тормозит
В system.process для insert запросов memory_usage всегда 0. А как можно посмотреть количество потребляемой памяти для insert в реальном времени?
источник

АК

Александр Каменский... in ClickHouse не тормозит
Подскажите пжл
есть пакет
rodger-bavix/laravel-clickhouse
пагинацию нужно сделать
           ->paginate(1, 2);
Ошибку выдает
Method Bavix\\LaravelClickHouse\\Database\\Query\\Builder::getCountForPagination does not exist.
я не нашел этого метода
источник

S

Slach in ClickHouse не тормозит
Ilya
В system.process для insert запросов memory_usage всегда 0. А как можно посмотреть количество потребляемой памяти для insert в реальном времени?
имеет смысл наверное issue для этого сделать в github

как вариант настроить memory profiler
и через https://github.com/Slach/clickhouse-flamegraph/
попробовать flamegraph для типа Memory построить...
источник

D

Dro in ClickHouse не тормозит
Всем привет, в доке по КХ, везде, черным по белому, рекомендуют за управление ролями, квотами, профилями и т.п. через SQL-воркфлоу.

Кто-то может объяснить с чем это связано?

Управление КХ планируется реализовать через  ansible, и пока не могу представить, что хранение настроек, юзеров и прочего намноо удобнее держать в SQL нежели в xml(где явно и структурировано все описано)

Поделитесь опытом, в чем плюс SQL-воркфлоу и как вы управляете конфигурацией и ролями в КХ?
источник

S

Slach in ClickHouse не тормозит
Dro
Всем привет, в доке по КХ, везде, черным по белому, рекомендуют за управление ролями, квотами, профилями и т.п. через SQL-воркфлоу.

Кто-то может объяснить с чем это связано?

Управление КХ планируется реализовать через  ansible, и пока не могу представить, что хранение настроек, юзеров и прочего намноо удобнее держать в SQL нежели в xml(где явно и структурировано все описано)

Поделитесь опытом, в чем плюс SQL-воркфлоу и как вы управляете конфигурацией и ролями в КХ?
ну, я думаю XML еще долго останется

RBAC  через SQL определяется   во всех СУБД практически

в целом же никто не мешает
CREATE ROLE IF NOT EXISTS сделать
и потом права раздавать
источник

A

Azat Khadiev in ClickHouse не тормозит
коллеги, КХ сервер начал потреблять много памяти. при этом активных запросов очень мало. как понять, куда уходит память? версия 20.8.4.11
источник

T

Techies in ClickHouse не тормозит
Dro
Всем привет, в доке по КХ, везде, черным по белому, рекомендуют за управление ролями, квотами, профилями и т.п. через SQL-воркфлоу.

Кто-то может объяснить с чем это связано?

Управление КХ планируется реализовать через  ansible, и пока не могу представить, что хранение настроек, юзеров и прочего намноо удобнее держать в SQL нежели в xml(где явно и структурировано все описано)

Поделитесь опытом, в чем плюс SQL-воркфлоу и как вы управляете конфигурацией и ролями в КХ?
For RBAC i find it useful to have separate tables for users, roles, permissions, role_permissions, and user_roles
источник

T

Techies in ClickHouse не тормозит
But ideally in SQL like postgres instead of clickhouse, there's no foreign keys in clickhouse right? :/
источник

S

Slach in ClickHouse не тормозит
Azat Khadiev
коллеги, КХ сервер начал потреблять много памяти. при этом активных запросов очень мало. как понять, куда уходит память? версия 20.8.4.11
SELECT * FROM system.merges
источник

D

Dro in ClickHouse не тормозит
Slach
ну, я думаю XML еще долго останется

RBAC  через SQL определяется   во всех СУБД практически

в целом же никто не мешает
CREATE ROLE IF NOT EXISTS сделать
и потом права раздавать
разве удобно хранить конфигурацию в sql файлах?
источник

S

Slach in ClickHouse не тормозит
Dro
разве удобно хранить конфигурацию в sql файлах?
ну вы попробуйте =)
я понимаю что видимо вам конкретно неудобно

но вообще если подумать SQL определение ролей и прав, компактнее чем XML и тем кто работает с БД просто возможно более читабельно

конечно самое удобное и читаемое это какой нибудь UI с security matrix
где столбцы это права
строки роли
и на пересечении галочка =)
но это уже другой подход "накликивания" и вам он не нужен
источник

S

Slach in ClickHouse не тормозит
Azat Khadiev
коллеги, КХ сервер начал потреблять много памяти. при этом активных запросов очень мало. как понять, куда уходит память? версия 20.8.4.11
SELECT * FROM system.query_log
там тоже есть про память
источник

S

Slach in ClickHouse не тормозит
Azat Khadiev
коллеги, КХ сервер начал потреблять много памяти. при этом активных запросов очень мало. как понять, куда уходит память? версия 20.8.4.11
еще
посмотрите
system.metric_log
там есть метрики по трекингу памяти


еще
system.dictionaries
может у вас словарь какой завелся который память отожрал внезапно?
источник

D

Dro in ClickHouse не тормозит
Slach
ну вы попробуйте =)
я понимаю что видимо вам конкретно неудобно

но вообще если подумать SQL определение ролей и прав, компактнее чем XML и тем кто работает с БД просто возможно более читабельно

конечно самое удобное и читаемое это какой нибудь UI с security matrix
где столбцы это права
строки роли
и на пересечении галочка =)
но это уже другой подход "накликивания" и вам он не нужен
мне тут интересен опыт других) Хотел понять в чем +- разных подходов и кто что использует.
источник

S

Slach in ClickHouse не тормозит
Dro
мне тут интересен опыт других) Хотел понять в чем +- разных подходов и кто что использует.
ну SQL более устоявшийся подход

недостатки  у него только то что обычно юзеров с паролями открытыми задают в SQL файлах
а надо бы через хеши =)
но это и в XML тоже встречается
источник

D

Dro in ClickHouse не тормозит
Slach
ну SQL более устоявшийся подход

недостатки  у него только то что обычно юзеров с паролями открытыми задают в SQL файлах
а надо бы через хеши =)
но это и в XML тоже встречается
спасибо
источник

A

Azat Khadiev in ClickHouse не тормозит
Slach
еще
посмотрите
system.metric_log
там есть метрики по трекингу памяти


еще
system.dictionaries
может у вас словарь какой завелся который память отожрал внезапно?
спасибо
источник

C

CHIP in ClickHouse не тормозит
привет всем, может кто знает, кликхаус после 5ти минут работы валится с ошибкой:
https://pastebin.com/raw/345dEYAt
источник