В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4851 membersпожаловаться на группу
2021 February 20

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Using Ordinary by default instead of Atomic

# cat /etc/clickhouse-server/config.d/disable_atomic_database.xml
<?xml version="1.0"?>
<yandex>
   <profiles>
       <default>
           <default_database_engine>Ordinary</default_database_engine>
       </default>
   </profiles>
</yandex>
источник
21:30пожаловаться#1

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Also, you can decrease the delay used by Atomic for real table drop (it’s 8 minutes by default)
cat /etc/clickhouse-server/config.d/database_atomic_delay_before_drop_table.xml
<yandex>
   <database_atomic_delay_before_drop_table_sec>1</database_atomic_delay_before_drop_table_sec>
</yandex>
источник
21:31пожаловаться#2

DC

Denny Crane [not a Y... in ClickHouse не тормозит
DROP TABLE t SYNC;
источник
21:31пожаловаться#3

DC

Denny Crane [not a Y... in ClickHouse не тормозит
database_atomic_wait_for_drop_and_detach_synchronously
When executing DROP or DETACH TABLE in Atomic database, wait for table data to be finally dropped or detached.

SET database_atomic_wait_for_drop_and_detach_synchronously = 1
источник
21:32пожаловаться#4

DC

Denny Crane [not a Y... in ClickHouse не тормозит
т.е. можно поставить
config.xml <database_atomic_delay_before_drop_table_sec>1
и
user.xml database_atomic_wait_for_drop_and_detach_synchronously>1
и будет все примерно по старому и с базой атомик.
источник
21:36пожаловаться#5

В

Виктор in ClickHouse не тормозит
Понял, спасибо большое
источник
21:43пожаловаться#6

В

Виктор in ClickHouse не тормозит
А еще вопрос: можно ли как-то ограничить использование зукипера - делаю insert into distributed select from distributed, обе таблицы смотрят на replicated merge tree - выжирает место на зукипере и тот падает
источник
21:43пожаловаться#7

В

Виктор in ClickHouse не тормозит
Занимаемое место медленно но верно растет
источник
21:44пожаловаться#8

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Виктор
А еще вопрос: можно ли как-то ограничить использование зукипера - делаю insert into distributed select from distributed, обе таблицы смотрят на replicated merge tree - выжирает место на зукипере и тот падает
ЗК база в памяти, обычно база Зукипера размером <100 МБ
источник
21:46пожаловаться#9

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Виктор
Занимаемое место медленно но верно растет
растет конкретно какой каталог, какие имена файлов? вы читали раздел доки про ЗК?
зукипер не удаляет бекапы по дефолту
источник
21:47пожаловаться#10

DC

Denny Crane [not a Y... in ClickHouse не тормозит
обычно зукипер умещается со снепшотами и логами в 1ГБ диска.
источник
21:48пожаловаться#11

DC

Denny Crane [not a Y... in ClickHouse не тормозит
размер 1го снепшота = размеру базы ЗК в ОЗУ
источник
21:49пожаловаться#12

DC

Denny Crane [not a Y... in ClickHouse не тормозит
логи зукипера это лог транзакций, который накатывается на снепшоты
источник
21:49пожаловаться#13

В

Виктор in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
растет конкретно какой каталог, какие имена файлов? вы читали раздел доки про ЗК?
зукипер не удаляет бекапы по дефолту
сейчас гляну
источник
21:50пожаловаться#14

DC

Denny Crane [not a Y... in ClickHouse не тормозит
по сути чтобы собраться зукиперу в базу в памяти нужен последний снепшот и логи после него
источник
21:50пожаловаться#15

G

GithubReleases in ClickHouse не тормозит
ClickHouse/ClickHouse tagged: v20.8.13.15-lts
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v20.8.13.15-lts
Release notes:
ClickHouse lts release v20.8.13.15-lts
GitHub
Release v20.8.13.15-lts · ClickHouse/ClickHouse
ClickHouse lts release v20.8.13.15-lts
источник
21:50пожаловаться#16

DC

Denny Crane [not a Y... in ClickHouse не тормозит
обычно хранят несколько последних снепшотов (5), потому что последний может быть корапченный из-за спонтанной перезагрузки хардавари
источник
21:51пожаловаться#17

В

Виктор in ClickHouse не тормозит
Остановил инсерт - занятое место висит на последнем уровне, на ноде зукипера 82 снапшота и 83 лога
источник
21:52пожаловаться#18

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Виктор
Остановил инсерт - занятое место висит на последнем уровне, на ноде зукипера 82 снапшота и 83 лога
https://clickhouse.tech/docs/ru/operations/tips/
autopurge.snapRetainCount=10
autopurge.purgeInterval=1

перестартовать зк
clickhouse.tech
Советы по эксплуатации | Документация ClickHouse
Советы по эксплуатации CPU Scaling Governor Всегда используйте performance scaling governor. ondemand scaling governor р
источник
21:57пожаловаться#19

DC

Denny Crane [not a Y... in ClickHouse не тормозит
С настройками по умолчанию, ZooKeeper является бомбой замедленного действия:

   Сервер ZooKeeper не будет удалять файлы со старыми снепшоты и логами при использовании конфигурации по умолчанию (см. autopurge), это является ответственностью оператора.

Эту бомбу нужно обезвредить.
источник
21:57пожаловаться#20