Size: a a a

ClickHouse не тормозит

2020 September 05

l

lnuynxa in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
А как диски появится в сервере? Я в просто переезжаю на новый сервер в этом случае
Ну допустим в том же хетцере можно доставить диски на некоторых железках
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
вот в хецнере просто беру другой сервер и переезжаю
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
А как диски появится в сервере? Я в просто переезжаю на новый сервер в этом случае
когда свой хард в datacenterах - так и появляется в expansion проектах )
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Да но вы должны осознавать что софтверный рейд на все диски даст огромный буст. Каждый раз когда запрос выполняется за 10мин. будет мысль: а мог бы и за 5.
источник

D

Dj in ClickHouse не тормозит
просто например кейс может быть, был 4 ТБ диск (рейд). добавили ещё 6.
и тут вот эти волюмы с пропорциональной записью могли быть очень кстати...
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
У меня софтверные рейды в хецнере из 10 дисков дают 1Гбайт/с на чтении
источник

n🐈

nikoinlove 🐈 in ClickHouse не тормозит
жалко в их такой сервер нельзя еще пару nvme запихать)
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
У меня софтверные рейды в хецнере из 10 дисков дают 1Гбайт/с на чтении
Ну в моей параллельной вселенной hw raid контроллеры это ещё про writeback cache с батарейкой. 5 x 10kRPM дают до 600 мбайт/c. При чтении в SW raid нечему проседать.
источник

AK

Andrii Kakoichenko in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
Я беру только сервера в которых рейд контроллер можно переключить в hba и все диски собираю в раид 10 и ос и кх живёт на этом рейде софтовом
То есть, если с репликейшн фактором 2, то выходит, что каждый байт хранится минимум на 4х дисках?
Не слишком ли накладно?
источник

n🐈

nikoinlove 🐈 in ClickHouse не тормозит
кому накладно рейд5 используют)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Кэш, слабый процессор и говняная фирмварь вместе дают жуткие тормоза.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Andrii Kakoichenko
То есть, если с репликейшн фактором 2, то выходит, что каждый байт хранится минимум на 4х дисках?
Не слишком ли накладно?
В хецнере  стоимость у тех серверов примерно как у спичек.
источник

AK

Andrii Kakoichenko in ClickHouse не тормозит
nikoinlove 🐈
кому накладно рейд5 используют)
Я на, например, репликейшн фактор 3 и без резервирования в рамках одной железки намекаю.
источник

AK

Andrii Kakoichenko in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
В хецнере  стоимость у тех серверов примерно как у спичек.
Какой конфигурации берете? Интересно хоть примерно
источник

n🐈

nikoinlove 🐈 in ClickHouse не тормозит
Andrii Kakoichenko
Я на, например, репликейшн фактор 3 и без резервирования в рамках одной железки намекаю.
ну просто обидно, когда у тебя один диск сдох, а тебе весь сервер переналивать:)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Andrii Kakoichenko
Какой конфигурации берете? Интересно хоть примерно
10 дисков по 10тб за 159 евро
источник

AK

Andrii Kakoichenko in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
10 дисков по 10тб за 159 евро
А сколько проца, рама на этот объем приходится?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
128 GB.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Его легко найти . Я не буду с телефона
источник

in ClickHouse не тормозит
источник