Size: a a a

ClickHouse не тормозит

2021 January 10

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Dmitry Polyakov
Умрете - я не про потерю данных, а про сам синк и перформанс. У меня у самого примерно такие же цифры, достаточно интенсивный регулярный поток без пиков и поэтому замена дисков затягивается :)
да постоянно меняем. И скрабинг раз в месяц.
источник

DP

Dmitry Polyakov in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
да постоянно меняем. И скрабинг раз в месяц.
Очень хорошо :) мы тоже меняем регулярно. И тоже живём в основном на хдд
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
и нормально ребилдятся 10TB-ые диски
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
mdraid конечно рулит
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
железные рейды в топку
источник

DP

Dmitry Polyakov in ClickHouse не тормозит
Да железные рейды, кажется, только виндовым юзерам уже и нужны :)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
про raid0, а еще смешно, но у меня вертика работает на raid1 из 2-х nvme. И что самое смешное уже несколько раз спасало.
источник

DP

Dmitry Polyakov in ClickHouse не тормозит
Dmitry Polyakov
Очень хорошо :) мы тоже меняем регулярно. И тоже живём в основном на хдд
Но под свой кейс я бы при возможности выкинул хдд шки и взял бы нвме сервера с репликой на уровне БД и забил бы на репликацию данных на уровне сервера :)
источник

DP

Dmitry Polyakov in ClickHouse не тормозит
Сдох нвме - перенакатил данные на всем сервере
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
я тоже сразу перейду на NVME когда выйдут 100ТБ NVME ценой по 100баксов
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Smoked Cheese
причём разница по объёму прочитанного 30 раз
нет, это про память. Там колонка 62 MB размером на диске.
источник

IR

Igor Rekun in ClickHouse не тормозит
А какие кстати могут быть подводные камни при раскатке под докер свормом?
источник

s

sexst in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
я тоже сразу перейду на NVME когда выйдут 100ТБ NVME ценой по 100баксов
Когда это случится, в сервера потребуется уже что-то новое, стоящее как подходящие nmve нынче
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Igor Rekun
А какие кстати могут быть подводные камни при раскатке под докер свормом?
эм, какая разница чем?
ну имена хостов в докере рандомные, но это к сварму не относится.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
а кто вообще свармом пользуется? его уже все похоронили
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Nikita Tikhomirov
Есть ли существенная разница в SSD/HDD для активной записи в Clickhouse?
нету. Если сделать 10й рейд из 10ти HDD , будет примерно как NVME, у меня КХ читает и пишет 1.5GB/s на HDD
источник

IR

Igor Rekun in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
эм, какая разница чем?
ну имена хостов в докере рандомные, но это к сварму не относится.
По феншую только кубером раскатывать?

Или кликхаус лучше вообще без прослоек руками настраивать?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Igor Rekun
По феншую только кубером раскатывать?

Или кликхаус лучше вообще без прослоек руками настраивать?
да как хотите, у меня chef и LXC
а так конечно, кубер это новый линукс
источник

S

Slach in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
да как хотите, у меня chef и LXC
а так конечно, кубер это новый линукс
Кубер это supervisord на стероидах
источник

AK

Alexey Kostarev in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
а кто вообще свармом пользуется? его уже все похоронили
Для небольших проектов решение swarm имеет очевидные преимущества перед k8
Это, кстати, признают и гуру kubernetes
Так что, не знаю у кого как, у нас swarm живее всех живых
источник