В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

4064 membersпожаловаться на группу
2020 July 06

AK

Alex Krash in ClickHouse не тормозит
Vasilij Abrosimov
Тогда конечно так себе решение. Спасибо!
Лучше не поленитесь "руками" сделать переливку. Если в MySQL не в MyISAM льёте - то завести дополнительную табличку с offset, и аккуратно переливать
источник
14:51пожаловаться#1

MF

Mihail F in ClickHouse не тормозит
Здравствуйте, какова может быть причина ошибки Code: 210. Connection refused (имя_сервера)
ConnectionRefusedError: [Errno 111] Connection refused
Устраняется при повторной попытки, но нужно выяснить причины. Грешили на порты, но этот вариант отпал, спасибо.
источник
16:00пожаловаться#2

M

Mishanya in ClickHouse не тормозит
Дороу
Ребзи, а можно ли в кх экспортнуть в цсвшку выборку ?
Вывести понятно как, но мне бы в файлик)

запросы ппц большие и их много, в терминале не каеф

Буду благодарен)
источник
16:20пожаловаться#3

V

Vladimir in ClickHouse не тормозит
Привет! Подскажите, плз. Есть таблица с полем FixedString(10) по которому строится индекс(order by). Есть ли смысл сделать отдельную колонку с hash от этого поля и делать индекс по хэшу или достаточно FixedString?
источник
16:20пожаловаться#4

V

Vladimir in ClickHouse не тормозит
И есть ли смысл ставить LowCardinality на FixedString(10)?
источник
16:23пожаловаться#5

M

Maxim Bogdanov in ClickHouse не тормозит
Подскажите, кто знает, насколько эффективно использовать Nested вместо того, чтобы разложить данные по колонкам. Иными словами:

Table (
    Goal1ID UInt32, 
    Goal1EventTime DateTime, 
    Goal2ID UInt32, 
    Goal2EventTime DateTime
    )

vs
Ta
ble (
    Goals Nested (
        ID UInt32, 
        EventTime DateTime
    )
)

У какого подхода какие могут быть преимущества-недостатки? В доке как-то очень скудно описан тип данных Nested.
источник
16:25пожаловаться#6

M

Munir in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
Да теперь и для интерактива надо запускать клиент с ключом -m или с -mn
Спасибо, попробую mn. Запускал с m
источник
16:26пожаловаться#7

DP

Dorian Peregrim in ClickHouse не тормозит
Добрый день. Подскажите, при работе с CH и Kafka, кто-то сталкивался с проблемой, что сообщения из топика не читаются, причем в логах куча сообщений по милисекундам {} <Debug> StorageKafka (topic): Started streaming to 1 attached views ?
источник
16:28пожаловаться#8

DC

Denny Crane (I don't... in ClickHouse не тормозит
Mihail F
Здравствуйте, какова может быть причина ошибки Code: 210. Connection refused (имя_сервера)
ConnectionRefusedError: [Errno 111] Connection refused
Устраняется при повторной попытки, но нужно выяснить причины. Грешили на порты, но этот вариант отпал, спасибо.
ну может запускался КХ или у вас несколько ip за днс записью
источник
16:30пожаловаться#9

MF

Mihail F in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
ну может запускался КХ или у вас несколько ip за днс записью
Спасибо
источник
16:30пожаловаться#10

DC

Denny Crane (I don't... in ClickHouse не тормозит
Mishanya
Дороу
Ребзи, а можно ли в кх экспортнуть в цсвшку выборку ?
Вывести понятно как, но мне бы в файлик)

запросы ппц большие и их много, в терминале не каеф

Буду благодарен)
clickhouse-client -q 'select 1 format CSV' > aaaa.csv
источник
16:30пожаловаться#11

DC

Denny Crane (I don't... in ClickHouse не тормозит
Vladimir
Привет! Подскажите, плз. Есть таблица с полем FixedString(10) по которому строится индекс(order by). Есть ли смысл сделать отдельную колонку с hash от этого поля и делать индекс по хэшу или достаточно FixedString?
нету смысла, проверяли
источник
16:32пожаловаться#12

DC

Denny Crane (I don't... in ClickHouse не тормозит
Vladimir
И есть ли смысл ставить LowCardinality на FixedString(10)?
да, если есть повторяющиеся значения. Если там UUID -ы и все разные, то нет
источник
16:32пожаловаться#13

V

Vladimir in ClickHouse не тормозит
спасибо!
источник
16:33пожаловаться#14

A

Aleksandr baltazor in ClickHouse не тормозит
Добрый день. Подскажите пожалуйста, можно ли как то в существующей таблице изменить настройку storage_policy? Или же нужно пересоздавать таблицу и переливать данные? Спасибо.
источник
16:36пожаловаться#15

DC

Denny Crane (I don't... in ClickHouse не тормозит
Maxim Bogdanov
Подскажите, кто знает, насколько эффективно использовать Nested вместо того, чтобы разложить данные по колонкам. Иными словами:

Table (
    Goal1ID UInt32, 
    Goal1EventTime DateTime, 
    Goal2ID UInt32, 
    Goal2EventTime DateTime
    )

vs
Ta
ble (
    Goals Nested (
        ID UInt32, 
        EventTime DateTime
    )
)

У какого подхода какие могут быть преимущества-недостатки? В доке как-то очень скудно описан тип данных Nested.
nested это сахар для create table. На самом деле это обычные массивы
т.е.     

`Goals.ID` Array( UInt32) , 
      `Goals.EventTime` Array(DateTime)


если есть возможность выносить в колонки то лучше выносить.

Например я столкнулся с такой проблемой
у меня было

`G
oals.ID` Array(String) , 
`Goals.EventTime` Array(String)

Goals.ID много разных, некоторые тяжелые, некоторые легкие
и например выяснилось  что если искать Goals.EventTime`[indexOf(`Goals.ID, 'aaaa')] то с диска читается 8TБ
а если вынести в отдельную колонку Goals_aaaa то читает 80MB и запрос выполняется в 500 раз быстрее
источник
16:38пожаловаться#16

M

Maxim Bogdanov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
nested это сахар для create table. На самом деле это обычные массивы
т.е.     

`Goals.ID` Array( UInt32) , 
      `Goals.EventTime` Array(DateTime)


если есть возможность выносить в колонки то лучше выносить.

Например я столкнулся с такой проблемой
у меня было

`G
oals.ID` Array(String) , 
`Goals.EventTime` Array(String)

Goals.ID много разных, некоторые тяжелые, некоторые легкие
и например выяснилось  что если искать Goals.EventTime`[indexOf(`Goals.ID, 'aaaa')] то с диска читается 8TБ
а если вынести в отдельную колонку Goals_aaaa то читает 80MB и запрос выполняется в 500 раз быстрее
О, спасибо! Очень полезно. Я как раз сделал второй вариант, но не успел ещё затестить бенчмарки.
источник
16:51пожаловаться#17

M

Maxim Bogdanov in ClickHouse не тормозит
Жаль дока не раскрывает деталей реализации подобных вещей.
источник
16:52пожаловаться#18

DC

Denny Crane (I don't... in ClickHouse не тормозит
Maxim Bogdanov
О, спасибо! Очень полезно. Я как раз сделал второй вариант, но не успел ещё затестить бенчмарки.
c другой стороны если вам всегда в запросах нужно все целиком и Goals.ID сотни и они все заранее неизвестны, то nested(массивы) тоже норм.
источник
16:53пожаловаться#19

DC

Denny Crane (I don't... in ClickHouse не тормозит
Maxim Bogdanov
Жаль дока не раскрывает деталей реализации подобных вещей.
да нельзя раскрыть такое в доке. Вам стало понятно потому что я объясняю вашими словами ваш кейс. Вы бы ничего не поняли из доки.
источник
16:55пожаловаться#20