Телеграмм чат группы clickhouse

вот устно мне это тоже говорили =) но я нигде не нашел пруфлинков

зачем пруфлинки, просто смотрите куда баги мерджатся )

14:17пожаловаться #1

S

Artem

Добрый день. Вчера запустил 1300 простых мутаций ALTER UPDATE на таблице с 7 млрд. записей. Прошло всего 2 мутации, остальные все ещё is_done = 0. Из 7 млрд. почти за сутки промутировало всего 40 млн записей. Почему так медленно? Они все работают параллельно или последовательно одна за другой? Мне кажется за это время можно было селектом пересоздать новую таблицу с обновлёнными данными. Можно ли как-то остановить мутации?

мутации работают последовательно
мутациями вы фактически инициировали множественное полное пересоздание партов попадающих под мутации

остановить мутации можно через KILL MUTATION

14:17пожаловаться #2

S

Dj

зачем пруфлинки, просто смотрите куда баги мерджатся )

нет, пруфлинки про релизную политику нужны и важны
и за всеми багами не уследишь

Artem in ClickHouse не тормозит

14:18пожаловаться #3

A

мутации работают последовательно
мутациями вы фактически инициировали множественное полное пересоздание партов попадающих под мутации

остановить мутации можно через KILL MUTATION

Однако при этом optimize table final мутации не ускорит?

14:18пожаловаться #4

RK

Rebrikov Konstantin in ClickHouse не тормозит

Запустит параллельно дополнительные мерджи. Так что на ближайшее время может даже замедлить.

14:22пожаловаться #5

S

Artem

Однако при этом optimize table final мутации не ускорит?

нет не ускорит
посмотрите в system.mutations там есть список партов которые будет мутация трогать
если он у вас большой (тысячи единиц), то явно у вас проблемки
сравните по кол-ву это с system.parts сколько у вас

Artem in ClickHouse не тормозит

14:34пожаловаться #6

A

нет не ускорит
посмотрите в system.mutations там есть список партов которые будет мутация трогать
если он у вас большой (тысячи единиц), то явно у вас проблемки
сравните по кол-ву это с system.parts сколько у вас

Проверил. Максимальное количество — 40 партов.

Artem in ClickHouse не тормозит

14:37пожаловаться #7

A

нет не ускорит
посмотрите в system.mutations там есть список партов которые будет мутация трогать
если он у вас большой (тысячи единиц), то явно у вас проблемки
сравните по кол-ву это с system.parts сколько у вас

Можно ли как-то узнать, какая именно сейчас мутация в процессе?

Alexey Milovidov in ClickHouse не тормозит

14:38пожаловаться #8

AM

Инженер ClickHouse в Yandex.Cloud https://yandex.ru/jobs/vacancies/maintenance/clickhouse_engineer/

yandex.ru

Инженер ClickHouse в Yandex.Cloud

Яндекс — одна из ведущих ИТ-компаний с офисами в 21 городе России. Создаёт сервисы для прямых пользователей и бизнеса. В команду ищет профессионалов, которые ценят открытость и свободу и стремятся менять мир к лучшему. Вам это близко? Откликайтесь на вакансии.

Mikhail Glader in ClickHouse не тормозит

14:41пожаловаться #9

MG

Which ClickHouse version to use in production?

вот тут все написано
https://clickhouse.tech/docs/en/faq/operations/production/

clickhouse.tech

Which ClickHouse Version to Use in Production? First of all, let’s discuss why people ask this question in the first pla

Спасибо, только там номеров нету. Только "Релизы lts выпускаются дважды в год"

14:41пожаловаться #10

S

Artem

Можно ли как-то узнать, какая именно сейчас мутация в процессе?

SELECT * FROM system.merges

14:42пожаловаться #11

S

Mikhail Glader

Спасибо, только там номеров нету. Только "Релизы lts выпускаются дважды в год"

ну да
ну LTS они помечают вот тут
https://github.com/ClickHouse/ClickHouse/releases/

подпишитесь на релизы в github
будете получать уведомленя

Alexey Milovidov in ClickHouse не тормозит

14:43пожаловаться #12

AM

Вот кстати машинно-читаемый файл со списком релизов:
https://github.com/ClickHouse/ClickHouse/blob/master/utils/list-versions/version_date.tsv

GitHub

ClickHouse/ClickHouse

ClickHouse® is a free analytics DBMS for big data. Contribute to ClickHouse/ClickHouse development by creating an account on GitHub.

Alexey Milovidov in ClickHouse не тормозит

14:52пожаловаться #13

AM

Я думал использовать его, чтобы сообщать о новых версиях, но ходить в интернет с сервера - плохая идея, поэтому пока не используется.

14:52пожаловаться #14

S

Alexey Milovidov

Я думал использовать его, чтобы сообщать о новых версиях, но ходить в интернет с сервера - плохая идея, поэтому пока не используется.

о прикольно github искать позволяет по CSV
забавно, не знал что был 19.14 LTS ;)

ildar nizamov in ClickHouse не тормозит

14:55пожаловаться #15

in

Есть ли в clickhouse-client интерактивный help или \h, как в psql или mysql?

есть какой-то отдельный чат по clickhouse client в котором стоит задать этот вопрос?

15:08пожаловаться #16

S

Есть ли в clickhouse-client интерактивный help или \h, как в psql или mysql?

нет
есть только auto-complete по TAB
все параметры можно посмотреть в

clickhouse-client --help

большинство из них можно в клиенте переопределить через SET

15:13пожаловаться #17

S

есть какой-то отдельный чат по clickhouse client в котором стоит задать этот вопрос?

нет такого чата нет =)

15:13пожаловаться #18

S

есть какой-то отдельный чат по clickhouse client в котором стоит задать этот вопрос?

а какие конкретно операции вам нужны из тех что предоставляет \h в MySQL?

ildar nizamov in ClickHouse не тормозит

15:14пожаловаться #19

in

li en in ClickHouse не тормозит

нет
есть только auto-complete по TAB
все параметры можно посмотреть в

clickhouse-client --help

большинство из них можно в клиенте переопределить через SET

Спасибо! Параметры самого клиента не интересны, интересна интерактивная справка по доступным командам SQL. Об этом второй вопрос https://t.me/clickhouse_ru/209574

как узнать все доступные опции для команды, если они не перечислены в доке? например, DROP DATABASE x ON CLUSTER y поддерживает NO DELAY , но этого нет в доке https://clickhouse.tech/docs/en/sql-reference/statements/drop/