В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4160 membersпожаловаться на группу
2020 August 12

SP

Sergey Platonov in ClickHouse не тормозит
Нужен совет. Есть справочники. Обновления поставляются в виде cvs.
Можно грохать и пересоздавать, но некрасиво как-то.
Нужен аналог update or insert.
Либо промежуточная таблица и insert as select с условием на несовпадения с тем что есть...
источник
12:16пожаловаться#1

РН

Роман Новожилов... in ClickHouse не тормозит
Подскажите, не глупость ли: сделать маленькую табличку с размером партиции на два часа и две партиции максимум (потом дропать) для частых опросов, а из неё через MV в "большую" таблицу для аналитики и длинных выборок? Это будет работать?
источник
12:18пожаловаться#2

РН

Роман Новожилов... in ClickHouse не тормозит
Или, может, лучше наоборот? Вставку в большую с копированием через MV в маленькую и ротировать её?
источник
12:28пожаловаться#3

D

Dmitry in ClickHouse не тормозит
Vladyslav Sakun
Ну так у Вас таймзона по умолчанию Europe/Moscow, вот и получаете toString(create_date) = toString(сreate_date, 'Europe/Moscow')
спасибо, это понятно. неясно почему при SELECT timezone()  Europe/Moscow, функция toString(dateTime) без указания таймзоны накидывает к значению +3 часа, а также функция toDate() если хочешь получить дату из даты_время тоже накидывает +3 часа. приходится делать так toDate(value, 'etc/GMT'). это баг или фича?)
источник
12:53пожаловаться#4

SC

Smoked Cheese in ClickHouse не тормозит
Vladimir
Привет!
Правильно ли я понимаю, что bloom_filter будет ускорять
 LIKE '%cat%'?
https://github.com/ClickHouse/ClickHouse/pull/4499
GitHub
Bloom filter indices by nikvas0 · Pull Request #4499 · ClickHouse/ClickHouse
I hereby agree to the terms of the CLA available at: https://yandex.ru/legal/cla/?lang=en
Category (leave one):

New Feature

Short description (up to few sentences):
A new type of data skipping in...
да, bloom_filter работает с like
https://clickhouse.tech/docs/en/engines/table-engines/mergetree-family/mergetree/#functions-support
clickhouse.tech
MergeTree | ClickHouse Documentation
MergeTree The MergeTree engine and other engines of this family (*MergeTree) are the most robust ClickHouse table engine
источник
12:55пожаловаться#5

SC

Smoked Cheese in ClickHouse не тормозит
будет ли ускорять - отдельный вопрос
источник
12:55пожаловаться#6

V

Vladimir in ClickHouse не тормозит
Smoked Cheese
да, bloom_filter работает с like
https://clickhouse.tech/docs/en/engines/table-engines/mergetree-family/mergetree/#functions-support
clickhouse.tech
MergeTree | ClickHouse Documentation
MergeTree The MergeTree engine and other engines of this family (*MergeTree) are the most robust ClickHouse table engine
Спасибо, я кажется разобрался уже)
источник
12:56пожаловаться#7

VS

Vladyslav Sakun in ClickHouse не тормозит
Dmitry
спасибо, это понятно. неясно почему при SELECT timezone()  Europe/Moscow, функция toString(dateTime) без указания таймзоны накидывает к значению +3 часа, а также функция toDate() если хочешь получить дату из даты_время тоже накидывает +3 часа. приходится делать так toDate(value, 'etc/GMT'). это баг или фича?)
У Вас стоит таймзона по умолчанию Europe/Moscow (+3 от UTC), всё время которое Вы используете в проекте Clickhouse приводит к этой таймзоне, если Вы не укажите таймзону непосредственно в функции.
Я пока не совсем понимаю, что у Вас не правильно работает и как должно быть.
источник
12:59пожаловаться#8

VS

Vladyslav Sakun in ClickHouse не тормозит
Если Вам надо без таймзоны, поставьте UTC и будет Вам радость
источник
13:00пожаловаться#9

D

Dmitry in ClickHouse не тормозит
Vladyslav Sakun
Если Вам надо без таймзоны, поставьте UTC и будет Вам радость
Спасибо!
источник
13:31пожаловаться#10

DC

Denny Crane (I don't... in ClickHouse не тормозит
Роман Новожилов
Подскажите, не глупость ли: сделать маленькую табличку с размером партиции на два часа и две партиции максимум (потом дропать) для частых опросов, а из неё через MV в "большую" таблицу для аналитики и длинных выборок? Это будет работать?
Можно так. И без разницы кто кому mv.

Можно и в большой табличке сделать в индексе час toHour() тогда маленькая не нужна.
источник
15:27пожаловаться#11

DC

Denny Crane (I don't... in ClickHouse не тормозит
Sergey Platonov
Нужен совет. Есть справочники. Обновления поставляются в виде cvs.
Можно грохать и пересоздавать, но некрасиво как-то.
Нужен аналог update or insert.
Либо промежуточная таблица и insert as select с условием на несовпадения с тем что есть...
Мы используем replacingMT + https://gist.github.com/den-crane/fb1108e4843250a71bac7528a79700c2
Gist
Clickhouse fast not exists
Clickhouse fast not exists . GitHub Gist: instantly share code, notes, and snippets.
источник
15:30пожаловаться#12

DC

Denny Crane (I don't... in ClickHouse не тормозит
Alexander Ryzhenko
Скажите, можно ли както вызвать хранимую процедуру на удаленном MS SQL сервере? И ее результат записать в КХ
Сделать view в mssql в которм select from sp
источник
15:32пожаловаться#13

DC

Denny Crane (I don't... in ClickHouse не тормозит
Егор Андреевич
Кто-нибудь сталкивался с залипанием запросов? Некоторые запросы выполняются бесконечно (хотя в другой момент времени те же самые запросы проходят успешно), несмотря на то, что у пользователя установлен max_execution_time в 30 секунд, при этом KILL QUERY так же залипает
Какая версия кх? И как  Примерно выглядит запрос?
источник
15:33пожаловаться#14

SP

Sergey Platonov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Мы используем replacingMT + https://gist.github.com/den-crane/fb1108e4843250a71bac7528a79700c2
Gist
Clickhouse fast not exists
Clickhouse fast not exists . GitHub Gist: instantly share code, notes, and snippets.
а если помимо новых записей есть записи которые изменились?
источник
15:34пожаловаться#15

SP

Sergey Platonov in ClickHouse не тормозит
банально флаг удаленности стал true
источник
15:34пожаловаться#16

DC

Denny Crane (I don't... in ClickHouse не тормозит
Anton T.
Добрый день. Вопрос про обновления. Мои сервера сейчас на 19.16.13.5419.16.13.54 я хочу обновится на самую новую версию КХ, в случае если что-то не устроит, смогу ли я откатиться назад? Смогу ли я это сделать безболезненно?
Откатися сможете если не будете создавать новые таблицы и не будете alter старые
источник
15:35пожаловаться#17

SP

Sergey Platonov in ClickHouse не тормозит
то есть есть новые записи мправочника и некоторые старые переведены в пассив
источник
15:35пожаловаться#18

AT

Anton T. in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Откатися сможете если не будете создавать новые таблицы и не будете alter старые
А если буду, уже не смогу?
источник
15:36пожаловаться#19

EZ

Egor Zagorskiy in ClickHouse не тормозит
всем добрый день. полный лог 300мб такой ошибки: https://pastebin.com/7eFmE4fd
потом КХ упал. Зукипер в порядке, насколько я вижу. что это может быть?
Pastebin
2020.08.12 13:48:26.600289 [ 44 ] {} <Error> DDLWorker: ZooKeeper error: Code: 9 - Pastebin.com
Pastebin.com is the number one paste tool since 2002. Pastebin is a website where you can store text online for a set period of time.
источник
15:36пожаловаться#20