В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4400 membersпожаловаться на группу
2020 September 18

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Denis Efarov
Есть возможность это отрепортить и как-то исправить? Поведение очень непредсказуемое, и кажется, не соответствует документации. Мы наткнулись на случай, когда в течение нескольких дней в таблицу вообще ничего не вставлялось без видимых причин
On the next try, the same software drops previously inserted rows

что такое drops previously inserted rows
источник
18:49пожаловаться#1

DE

Denis Efarov in ClickHouse не тормозит
alter table <name> delete where <>
источник
18:52пожаловаться#2

DE

Denis Efarov in ClickHouse не тормозит
удаляет
источник
18:52пожаловаться#3

DE

Denis Efarov in ClickHouse не тормозит
то что было в первой попытке вставлено
источник
18:52пожаловаться#4

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Denis Efarov
то что было в первой попытке вставлено
это сильно неочевидно и неправильно по меркам КХ. Вы просто должны повторять сбойные инсерты, без никаких alter delete.
источник
18:53пожаловаться#5

DE

Denis Efarov in ClickHouse не тормозит
в steps to reproduce описан способ без всяких удалений
источник
18:54пожаловаться#6

DE

Denis Efarov in ClickHouse не тормозит
я просто подробно описал кейс, на котором мы напоролись на это
источник
18:54пожаловаться#7

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Denis Efarov
я просто подробно описал кейс, на котором мы напоролись на это
удалите тот абзац вообще
источник
18:54пожаловаться#8

DC

Denny Crane [not a Y... in ClickHouse не тормозит
иначе просто разработчики не будут дальше читать
источник
18:55пожаловаться#9

K

Kid in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
покажите строку со статистикой моего варианта и вашего
1 - после  переписки запроса на то, аналогично вашему примеру
2 - исходных запрос, который падал по памяти
216 rows in set. Elapsed: 68.818 sec. Processed 579.62 million rows, 23.27 GB (8.42 million rows/s., 338.21 MB/s.)
216 rows in set. Elapsed: 24.574 sec. Processed 710.20 million rows, 26.63 GB (28.90 million rows/s., 1.08 GB/s.)
источник
18:56пожаловаться#10

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Kid
1 - после  переписки запроса на то, аналогично вашему примеру
2 - исходных запрос, который падал по памяти
216 rows in set. Elapsed: 68.818 sec. Processed 579.62 million rows, 23.27 GB (8.42 million rows/s., 338.21 MB/s.)
216 rows in set. Elapsed: 24.574 sec. Processed 710.20 million rows, 26.63 GB (28.90 million rows/s., 1.08 GB/s.)
загадочно, чушь какая-то, а если поздапрос который t join t1 какая статистика
источник
18:58пожаловаться#11

DE

Denis Efarov in ClickHouse не тормозит
я не понимаю, что значит "неправильно и неочевидно по меркам КХ". Есть база, мы пользуемся ее документированным функционалом. Каким образом он может быть неожиданным?
источник
18:59пожаловаться#12

DE

Denis Efarov in ClickHouse не тормозит
Я перенесу абзац в доп часть внизу описания, раз у них парсер ломается
источник
18:59пожаловаться#13

S

Slach in ClickHouse не тормозит
Дмитрий Бережнов
Попробуйте поигаться с этим https://clickhouse.tech/docs/en/sql-reference/functions/date-time-functions/#formatdatetime
clickhouse.tech
Dates and Times | ClickHouse Documentation
Functions for Working with Dates and Times Support for time zones All functions for working with the date and time that
@PolitePp
не. это точно не то что нужно, сам искал такую функцию
нужно что то типа
formatReadableSize

но для duration
типа
formatReadableDuration

но тут проблема с локализацией и скорее всего такое придется делать самостоятельно в приложении
какой нибудь timedelta на python может помочь
источник
19:00пожаловаться#14

VK

Vladimir K. in ClickHouse не тормозит
Я из pycharm скопировал битовое представление, типа b'\x....'. Вот ту часть внутри, в общем. И она нормально вставилась. Так что я предположил, что при вставке через питон он делает это как строчку (точ что написал выше),а, значит, появляются лишние символы. Теперь думаю, как передать сырые байты. Пока не придумал)
Но в любом случае спасибо за подсказки. Если что-то получится - сообщу)
источник
19:03пожаловаться#15

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Denis Efarov
я не понимаю, что значит "неправильно и неочевидно по меркам КХ". Есть база, мы пользуемся ее документированным функционалом. Каким образом он может быть неожиданным?
во первых alter delete -- никто не использует для бизнес-процессов.

во вторых сейчас ваш текст выглядит так:

у меня проблема со слухом.
....
Я поковырял в ухе отверткой.


я вам 50 тикетов могу про это показать, ровно как у вас написано.
источник
19:04пожаловаться#16

DC

Denny Crane [not a Y... in ClickHouse не тормозит
если кто-то из разрабов увидит про alter delete они просто не будут дальше читать про дедупликацию
источник
19:05пожаловаться#17

DE

Denis Efarov in ClickHouse не тормозит
аналогия неуместна. Документация декларирует, что есть функционал по удалению строк. С чего вдруг он неуместен для бизнес процессов?
источник
19:05пожаловаться#18

DE

Denis Efarov in ClickHouse не тормозит
в документации сказано, что это опасная нестабильная фича и ее нельзя использовать? вроде нет
источник
19:05пожаловаться#19

DE

Denis Efarov in ClickHouse не тормозит
и пожалуйста, давайте отвечать без нелепых аналогий, это неконструктивно. Я ссылаюсь на публичную документацию, а вы на отвертки в ушах
источник
19:06пожаловаться#20