Size: a a a

ClickHouse не тормозит

2020 June 15

~~

~ syrext ~ in ClickHouse не тормозит
спасибо! как раз проверяю эту настройку
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Pavel Kozhuhar
а что произойдет если для парта3 не хватит места на диске?
мерж проверяет что место есть. преред мержем будет зарезервировано место как два размера суммарного исходных партов. Если мерж неуспешен, то просто недоделанный мерж удаляется и начинается снова
источник

DT

Dmitry Titov in ClickHouse не тормозит
Nikolay
а хэш чего? парты ?
самой вставки. но вопрос как учитывается тот момент, когда создаются несколько tmp кусочком
источник

N

Nikolay in ClickHouse не тормозит
Dmitry Titov
самой вставки. но вопрос как учитывается тот момент, когда создаются несколько tmp кусочком
а эта вставка на диске во что превращается? т.е на диске ээтот хэш от чего?
источник

P

Pavel Kozhuhar in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
мерж проверяет что место есть. преред мержем будет зарезервировано место как два размера суммарного исходных партов. Если мерж неуспешен, то просто недоделанный мерж удаляется и начинается снова
>Если мерж неуспешен, то просто недоделанный мерж удаляется и начинается снова

а до каких пор он это будет делать? если один раз ему места не хватит — он начнет делать мерж еще раз, если я правильно понял. до каких пор он будет так делать?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Στέφανος Σαμαρδάκης
Друзья, можно глупый вопрос: Ничего не развалится навечно, если перенести файлы базы на другой раздел?
нет, если КХ найдет эти файлы на другом разделе через симлинк и изменение конфига КХ
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Pavel Kozhuhar
>Если мерж неуспешен, то просто недоделанный мерж удаляется и начинается снова

а до каких пор он это будет делать? если один раз ему места не хватит — он начнет делать мерж еще раз, если я правильно понял. до каких пор он будет так делать?
пока не смержит
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Nikolay
а эта вставка на диске во что превращается? т.е на диске ээтот хэш от чего?
от имен и типов колонок и потока байт блока инсерта
источник

D

Dj in ClickHouse не тормозит
спс, исправил сообщение
источник

N

Nikolay in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
от имен и типов колонок и потока байт блока инсерта
тут непонятно что из себя из себя этот кусок?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Nikolay
тут непонятно что из себя из себя этот кусок?
на диске это каталог с файлами колонок, парт
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Nikolay
тут непонятно что из себя из себя этот кусок?
источник

DT

Dmitry Titov in ClickHouse не тормозит
непонятен только момент, если у нас есть 1 инсерт, из него создается несколько кусков. и какие то из этих кусков уже были вставлены, сработает ли дедубликация на весь инсерт или только на часть кусков?
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
Dmitry Titov
непонятен только момент, если у нас есть 1 инсерт, из него создается несколько кусков. и какие то из этих кусков уже были вставлены, сработает ли дедубликация на весь инсерт или только на часть кусков?
хеш на каждый кусок, т.е. один инсерт может породить много кусков и много хешей
источник

DT

Dmitry Titov in ClickHouse не тормозит
Хорошо, те в теории вставка может дропаться частями.(впрочем выглядит очень маловероятным совпадением)
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
инсерт это стрим, например льем 2 TB, создаются парты по 1млн строк (256МБ), они появляются и на репликах и в ЗК еще до конца инсерта
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
если такой стрим прервертся и он создал больше чем 100кусков, то вы ССЗБ, дедупликация не сработает
источник

DT

Dmitry Titov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
если такой стрим прервертся и он создал больше чем 100кусков, то вы ССЗБ, дедупликация не сработает
Лучше не злоупотреблять большими стримами, понятно
источник

DC

Denny Crane (I don't... in ClickHouse не тормозит
ну наверное если понимать что делаешь, то можно
источник

O

Oleg in ClickHouse не тормозит
Подскажите как такое может быть: запрос к таблице mergetree select * from table where A and B and C - возвращает записи.
Но при этом точно такой же запрос  select COLNAME from table where A and B and C - возвращает 0 строк?
версия CH 19.17.6
источник