Телеграмм чат группы clickhouse_ru страница 9519

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

5029 membersпожаловаться на группу

2021 March 17

AP

Al. P. in ClickHouse не тормозит

ну и второй endpoint это /replica_status
но это для мониторинга того что с репликацией все ОК
репликацию чинить надо без выключения ноды по возможности...

https://clickhouse.tech/docs/en/operations/monitoring/#clickhouse-server-metrics

clickhouse.tech

Monitoring | ClickHouse Documentation

Monitoring You can monitor: Utilization of hardware resources. ClickHouse server metrics. Resource Utilization ClickHous

Ок, спасибо. Интересно, почему КХ нервно на ТЦП реагирует? Другие технологии как-то нормально себя ведут. К примеру у нас используется tcp для mysql/postgres, проблем не было.

источник

16:15пожаловаться #1

S

Slach in ClickHouse не тормозит

Al. P.

Ок, спасибо. Интересно, почему КХ нервно на ТЦП реагирует? Другие технологии как-то нормально себя ведут. К примеру у нас используется tcp для mysql/postgres, проблем не было.

ну, тут скорее clickhouse себя тоже нормально ведет, просто exception получает в библиотеке обработки соединений и логирует

источник

16:26пожаловаться #2

MM

Michael M in ClickHouse не тормозит

Можно сгруппировать по дням потом
arrayMap(x-> x[-1] - x[1] , arraySplit (x -> x > 15*60,arrayDifference))

Огромное спасибо за помощь. Вышел вот такой запрос по расчёту продолжительности сессий по дням по юзерам:

SELECT
    toDate(CreatedTime) AS d,
    UserID,
    arrayAvg(arrayMap(x -> arraySum(x), arraySplit(x -> (x > (15 * 60)), arrayDifference(arraySort(groupArray(toUInt32(CreatedTime))))))) AS SessionDuratio,
    arrayAvg(arrayMap(x -> arrayCount(arrayMap(x -> toUInt8(x), x)), arraySplit(x -> (x > (15 * 60)), arrayDifference(arraySort(groupArray(toUInt32(CreatedTime))))))) AS EventsPerSession
FROM Events
GROUP BY
    d,
    UserID
LIMIT 10

источник

16:32пожаловаться #3

D

Dj in ClickHouse не тормозит

подскажите, а можно как-то смигрировать движок бд с обычного на atomic?

https://t.me/clickhouse_en/30813

Denny Crane [Junior support specialist at Altinity (NB,Canada)] in ClickHouse

create database atomic_db Engine=Atomic;
create database ordinary_db Engine=Ordinary;
insert into atomic_db.x select number from numbers(100000);

rename table atomic_db.x to ordinary_db.x;
ls -1 /var/lib/clickhouse/data/ordinary_db/x
all_1_1_0
detached
format_version.txt

drop database atomic_db;
detach database ordinary_db;
mv /var/lib/clickhouse/metadata/ordinary_db.sql /var/lib/clickhouse/metadata/atomic_db.sql
vi /var/lib/clickhouse/metadata/atomic_db.sql
mv /var/lib/clickhouse/metadata/ordinary_db /var/lib/clickhouse/metadata/atomic_db
mv /var/lib/clickhouse/data/ordinary_db /var/lib/clickhouse/data/atomic_db
attach database atomic_db;

select count() from atomic_db.x
┌─count() ─┐
│ 100000 │
└─────────┘
show create database atomic_db
┌─statement ──────────────────────────────────┐
│ CREATE DATABASE atomic_db
ENGINE = Ordinary │
└────────────────────────────────────────────┘

источник

16:39пожаловаться #4

KM

Konstantin Malanchev in ClickHouse не тормозит

"TensorBase Frontier: 5x ~ 10000x Faster Drop-in Replacement or Accelerator For ClickHouse in Rust"
https://tensorbase.io/2021/03/16/announce_base_fe.html

источник

16:40пожаловаться #5

D

Dj in ClickHouse не тормозит

подскажите, а можно как-то смигрировать движок бд с обычного на atomic?

у них было в альтинити конфлюенсе но его прикрыли до лучших времен

источник

16:40пожаловаться #6

SC

Smoked Cheese in ClickHouse не тормозит

https://t.me/clickhouse_en/30813

Denny Crane [Junior support specialist at Altinity (NB,Canada)] in ClickHouse

create database atomic_db Engine=Atomic;
create database ordinary_db Engine=Ordinary;
insert into atomic_db.x select number from numbers(100000);

rename table atomic_db.x to ordinary_db.x;
ls -1 /var/lib/clickhouse/data/ordinary_db/x
all_1_1_0
detached
format_version.txt

drop database atomic_db;
detach database ordinary_db;
mv /var/lib/clickhouse/metadata/ordinary_db.sql /var/lib/clickhouse/metadata/atomic_db.sql
vi /var/lib/clickhouse/metadata/atomic_db.sql
mv /var/lib/clickhouse/metadata/ordinary_db /var/lib/clickhouse/metadata/atomic_db
mv /var/lib/clickhouse/data/ordinary_db /var/lib/clickhouse/data/atomic_db
attach database atomic_db;

select count() from atomic_db.x
┌─count() ─┐
│ 100000 │
└─────────┘
show create database atomic_db
┌─statement ──────────────────────────────────┐
│ CREATE DATABASE atomic_db
ENGINE = Ordinary │
└────────────────────────────────────────────┘

понятно, спасибо

источник

16:40пожаловаться #7

D

Dj in ClickHouse не тормозит

Konstantin Malanchev

"TensorBase Frontier: 5x ~ 10000x Faster Drop-in Replacement or Accelerator For ClickHouse in Rust"
https://tensorbase.io/2021/03/16/announce_base_fe.html

ну все, переезжаем =)

на самом деле там пока что в 5 раз на непонятном https://tensorbase.io/2020/08/04/hello-base.html
учитывая что в КХ max_threads по умолчанию идет как половина, полноценный бенчмарк еще надо померить...

но симуляция на numbers и эффективность впечатляет ... посмотрим сможет ли оно дойти до нормального продукта

источник

17:17пожаловаться #8

DT

Dmitry Titov in ClickHouse не тормозит

ну все, переезжаем =)

на самом деле там пока что в 5 раз на непонятном https://tensorbase.io/2020/08/04/hello-base.html
учитывая что в КХ max_threads по умолчанию идет как половина, полноценный бенчмарк еще надо померить...

но симуляция на numbers и эффективность впечатляет ... посмотрим сможет ли оно дойти до нормального продукта

Придется одного разраба тогда выделить :)

To join the ESCP, no money needed, companies just
Contributes at least one person into TensorBase.

Then you have the ESCP benefits like:
Full source use rights, including any commercial uses.
Propose and give priority to solving the requirements from your companies.
Day 0 maintenance from TensorBase's outstanding engineering talents.

источник

17:19пожаловаться #9

DT

Dmitry Titov in ClickHouse не тормозит

TensorBase supports mixed deployments with ClickHouse.
Fearless adaption as a drop-in or accelerator depends on your workloads.

Первое не совсем понял, это же не про репликацию?

источник

17:20пожаловаться #10

DC

Denny Crane [not a Y... in ClickHouse не тормозит

подскажите, а можно как-то смигрировать движок бд с обычного на atomic?

rename table

источник

17:26пожаловаться #11

D

Dj in ClickHouse не тормозит

TensorBase supports mixed deployments with ClickHouse.
Fearless adaption as a drop-in or accelerator depends on your workloads.

Первое не совсем понял, это же не про репликацию?

нет, это значит он будет взаимозаменяем. т.е. можно будет переезжать постепенно и спокойно...

источник

17:44пожаловаться #12

BS

Brommie Savor in ClickHouse не тормозит

Привет. Почему-то на долго завис запрос к кх, попытался убить через KILL QUERY - зависло в статусе waiting

источник

17:52пожаловаться #13

BS

Brommie Savor in ClickHouse не тормозит

Что может быть и как прибить окончалтельно?)

источник

17:53пожаловаться #14

DT

Dmitry Titov in ClickHouse не тормозит

Привет. Почему-то на долго завис запрос к кх, попытался убить через KILL QUERY - зависло в статусе waiting

Кх может убить запрос только на определенных этапах выполнение, может так случится что ваш запрос завис и не доходит до этого момента.
Решение -> рестарт сервера

источник

17:54пожаловаться #15

BS

Brommie Savor in ClickHouse не тормозит

Кх может убить запрос только на определенных этапах выполнение, может так случится что ваш запрос завис и не доходит до этого момента.
Решение -> рестарт сервера

ну может эта строка что-то даст
ProfileEvents.Names: ['Query','SelectQuery','FunctionExecute','ContextLock','RWLockAcquiredReadLocks']

источник

17:55пожаловаться #16

BS

Brommie Savor in ClickHouse не тормозит

Но странно что поможет только рестарт, как-то не по людски)

источник

17:55пожаловаться #17

VB

Vladimir Bunchuk in ClickHouse не тормозит

Коллеги, что посоветуете делать если завис запрос и Kill query не помогает?

источник

17:57пожаловаться #18

K

Konstantin Ilchenko in ClickHouse не тормозит

прочитать последних 5 сообщений)

источник

17:57пожаловаться #19

VB

Vladimir Bunchuk in ClickHouse не тормозит

йой )

источник

17:58пожаловаться #20