А
Вячеслав Владимиров
Если данные не постуают - почему будут тратиться ресурсы? Скажите ей optimize final - и все. Потом freeze и лейте
База 6 тб. На одной ноде. Оптимайз может идти месяц. Диск загружен под 100%
Size: a a a
2021 January 22
D
а SSD или HDD?
А
Hdd
D
мои соболезнования :)
M
Модина Питон
доброго времени суток! подскажите, пожалуйста, можно ли безопасно пересоздавать kafak таблицу на которую навешена мат вью, не останавливая поток к саму кафку?
смотрите только, что бы поля были корректтно указаны в MV
а так да, консьюм просто стопнется, когда создадие заново - продолжится
а так да, консьюм просто стопнется, когда создадие заново - продолжится
МП
смотрите только, что бы поля были корректтно указаны в MV
а так да, консьюм просто стопнется, когда создадие заново - продолжится
а так да, консьюм просто стопнется, когда создадие заново - продолжится
да, поля остаются на месте, только новый топик хотели добавить. То есть я правильно понимаю, что у kafka движка все нормально с консистентностью при удалении таблицы - либо записал все и поменял offset, либо ничего не записал и offset в kafka остался прежним? А то я каждый раз перестраховываюсь и останавливаю поток в kafka :<
AG
В clickhouse еще нет UDF (user defined functions)?
Планируются ли, и почему до сих пор нет, есть потенциальные сложности реализации в этом проекте?
Планируются ли, и почему до сих пор нет, есть потенциальные сложности реализации в этом проекте?
M
Модина Питон
да, поля остаются на месте, только новый топик хотели добавить. То есть я правильно понимаю, что у kafka движка все нормально с консистентностью при удалении таблицы - либо записал все и поменял offset, либо ничего не записал и offset в kafka остался прежним? А то я каждый раз перестраховываюсь и останавливаю поток в kafka :<
в кафку можете продолжать пушить, ничего не случится
МП
в кафку можете продолжать пушить, ничего не случится
ок, спасибо за инфу!
AC
Привет
Кто нибудь знает clickhouse-operator
Хочу сделать loadbalancer'ы на уровне кластеров а не chi
Но если я объявляю serviceTempalte на уровне chi то оператор ломается поскольку на этом уровне нет макроса {cluster} (для generatieName и селектора) а если объявляю на уровне кластера то он игнорируется и используется дефолтовый балансер на уровне chi
Кто нибудь знает clickhouse-operator
Хочу сделать loadbalancer'ы на уровне кластеров а не chi
Но если я объявляю serviceTempalte на уровне chi то оператор ломается поскольку на этом уровне нет макроса {cluster} (для generatieName и селектора) а если объявляю на уровне кластера то он игнорируется и используется дефолтовый балансер на уровне chi
IK
я правильно понимаю что если сделать такой запрос
where (uid, date) in ( Select uid, max(date) ….)
то это равнозначно
uid in list(uids) and date in list(max(dates))
или там будет именно соответствие ккнретный uid и именно его max(date)
where (uid, date) in ( Select uid, max(date) ….)
то это равнозначно
uid in list(uids) and date in list(max(dates))
или там будет именно соответствие ккнретный uid и именно его max(date)
DT
я правильно понимаю что если сделать такой запрос
where (uid, date) in ( Select uid, max(date) ….)
то это равнозначно
uid in list(uids) and date in list(max(dates))
или там будет именно соответствие ккнретный uid и именно его max(date)
where (uid, date) in ( Select uid, max(date) ….)
то это равнозначно
uid in list(uids) and date in list(max(dates))
или там будет именно соответствие ккнретный uid и именно его max(date)
> или там будет именно соответствие ккнретный uid и именно его max(date)
это будет
это будет
IK
Огонь, спасибо
T
Добрый день коллеги. Подскажите - как проще всего сменить ключ партиционирования для реплицируемой таблицы?
ИИ
Господа, доброго времени суток.
Недавно обновил Clickhouse до LTS версии -
Тем не менее, сегодня (спустя примерно 2 дня после установки индексов на таблицы) получил ошибку:
Подскажите, пожалуйста, как локально пересобрать индекс, а так же не допустить проблем в будущем?
Недавно обновил Clickhouse до LTS версии -
20.8.9.6, в которой, по идее, должны были решить проблему с разваливающимеся индексами. До этого стояла версия 19.13.6.Тем не менее, сегодня (спустя примерно 2 дня после установки индексов на таблицы) получил ошибку:
DB::Exception: Bad size of marks file '/var/lib/clickhouse/data/db/locatable_entity_states/202007_0_95577_29252_132669/skp_idx_loc_campus_id_idx.mrk2': 144, must be: 168
Подскажите, пожалуйста, как локально пересобрать индекс, а так же не допустить проблем в будущем?
Д
Добрый день! После обновления КХ до последней версии, резко увеличилось количество ошибок с сообщением
Как можно поправить?
Code: 210, e.displayText() = DB::NetException: I/O error: Broken pipe, while writing to socket (10.42.178.196:49374) (version 21.1.2.15 (official build))
Как можно поправить?
НК
Добрый день! подскажите, пытаюсь обновить данные в таблице "ALTER TABLE table UPDATE field = 'newValue' WHERE name = 'test';", но получаю такую ошибку "DB::ErrnoException: Allocator: Cannot mmap 16.00 EiB., errno: 12, strerror: Cannot allocate memory (version 20.7.2.30 (official build))". CH на докере, в чем может быть дело?
Пробовал прогнать запрос на серваке, там он отработал
Пробовал прогнать запрос на серваке, там он отработал
M
Никита Козловский
Добрый день! подскажите, пытаюсь обновить данные в таблице "ALTER TABLE table UPDATE field = 'newValue' WHERE name = 'test';", но получаю такую ошибку "DB::ErrnoException: Allocator: Cannot mmap 16.00 EiB., errno: 12, strerror: Cannot allocate memory (version 20.7.2.30 (official build))". CH на докере, в чем может быть дело?
Пробовал прогнать запрос на серваке, там он отработал
Пробовал прогнать запрос на серваке, там он отработал
памяти в докер накиньте
НК
памяти в докер накиньте
по максимуму добавил, да и в ошибке пишет что нужно 16.00 EiB, чет дофига
YV
Никита Козловский
по максимуму добавил, да и в ошибке пишет что нужно 16.00 EiB, чет дофига
Попробуй в конфиг добавить или раскомментить вот это
<max_server_memory_usage_to_ram_ratio replace="1">2</max_server_memory_usage_to_ram_ratio>
<max_server_memory_usage_to_ram_ratio replace="1">2</max_server_memory_usage_to_ram_ratio>