Size: a a a

ClickHouse не тормозит

2021 March 16

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Андрей З
Привет.

Допустим, есть шардированная ReplicatedCollapsingMergeTree таблица и Distributed таблица над ней. Запись идёт через Distributed таблицу.

Я же правильно понимаю, что не стоит ждать магии и для того, чтобы collapsing работал необходимо чтобы соответствующие строки попадали на один шард?
правильно. Надо самому задавать sharding expression у Distributed
источник

ЕК

Евгений Кузнецов... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
CH у вас какой версии?
version 20.3.8.53 (official build)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
фичу EXCEPT добавили на 8 месяцев позже. В 20.9 что-ли
источник

ЕК

Евгений Кузнецов... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
фичу EXCEPT добавили на 8 месяцев позже. В 20.9 что-ли
понял, спасибо =)
источник

ВВ

Вячеслав Владимиров... in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
Хосты в локалке пинг около 1 мс
я про лимит КХ. Вы писали что "стоит" 50
источник

SI

Serg Ivanov in ClickHouse не тормозит
Добрый вечер! Есть ли способы увеличения производительности КХ кроме ввода SSD, Raid, более мощного процессора, памяти, кластера серверов? 😊
источник

DT

Dmitry Titov in ClickHouse не тормозит
Serg Ivanov
Добрый вечер! Есть ли способы увеличения производительности КХ кроме ввода SSD, Raid, более мощного процессора, памяти, кластера серверов? 😊
посмотреть на запросы и схему таблиц
источник

SI

Serg Ivanov in ClickHouse не тормозит
Dmitry Titov
посмотреть на запросы и схему таблиц
👍
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Вячеслав Владимиров
я про лимит КХ. Вы писали что "стоит" 50
я цитировал автора проблемы. У него не может быть того что вы подумали. У него цитата: "Хосты в локалке пинг около 1 мс"
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Serg Ivanov
Добрый вечер! Есть ли способы увеличения производительности КХ кроме ввода SSD, Raid, более мощного процессора, памяти, кластера серверов? 😊
есть секретный параметр fast=true, по умолчанию выключен, чтобы мозг у пользователей не взрывался
источник

AK

Alexey Kh in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
есть секретный параметр fast=true, по умолчанию выключен, чтобы мозг у пользователей не взрывался
на самом деле да,  mitigations=off в kernel cmdline
источник

IS

Illia Slobozhanin in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
есть секретный параметр fast=true, по умолчанию выключен, чтобы мозг у пользователей не взрывался
Мне говорили что он называется improve_perfomance_x10 = true
источник

IS

Illia Slobozhanin in ClickHouse не тормозит
Serg Ivanov
Добрый вечер! Есть ли способы увеличения производительности КХ кроме ввода SSD, Raid, более мощного процессора, памяти, кластера серверов? 😊
А вообще подбирать правильные ключи и не делать фулсканы постоянно
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
fast=true это очень старая шутка про оракл, сейчас погуглил

Oracle had to update all the rows with the default value when adding the column. 11G introduced a fast=true feature for adding columns with default values.
источник

BS

Brommie Savor in ClickHouse не тормозит
Может чуть глупый вопрос - не забрасывайте камнями)
Как лучше инсертить в кликхауз пачками?
Куча инсертов в транзакции или много VALUES в 1 инсерте?
источник

DT

Dmitry Titov in ClickHouse не тормозит
Brommie Savor
Может чуть глупый вопрос - не забрасывайте камнями)
Как лучше инсертить в кликхауз пачками?
Куча инсертов в транзакции или много VALUES в 1 инсерте?
оптимально вставка до 1 млн строк за раз не чаще раза в секунду+-
источник

BS

Brommie Savor in ClickHouse не тормозит
Dmitry Titov
оптимально вставка до 1 млн строк за раз не чаще раза в секунду+-
ну я про метод больше
источник

SC

Smoked Cheese in ClickHouse не тормозит
Brommie Savor
Может чуть глупый вопрос - не забрасывайте камнями)
Как лучше инсертить в кликхауз пачками?
Куча инсертов в транзакции или много VALUES в 1 инсерте?
в кликхаусе нет транзакций
источник

BS

Brommie Savor in ClickHouse не тормозит
Smoked Cheese
в кликхаусе нет транзакций
да, знаю, но в клиенте это почему-то выглядит как транзакция
источник

SC

Smoked Cheese in ClickHouse не тормозит
выглядит просто как реализация дженерик интерфейса
источник