В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

5061 membersпожаловаться на группу
2021 March 25

S

Slach in ClickHouse не тормозит
а если sha256 ?
вообще тут интересно, по идее пароль передается в открытом виде в протоколе по TCP

можете tcpdump снять чтобы сравнить что отсылает clickhouse-go и clickhouse-client?
источник
15:20пожаловаться#1

YY

Yury Yurochko in ClickHouse не тормозит
ща попробуем)
источник
15:20пожаловаться#2

YY

Yury Yurochko in ClickHouse не тормозит
интересно, локально он с sha1 ок работает, но на проде нет
версия КХ и версия софта одна
источник
15:22пожаловаться#3

T

T in ClickHouse не тормозит
Всем привет, никто не сталкивался с таким, делаешь select count(*) получаешь определенное значение X, выполняю insert select, и получаешь каунт с итоговой таблицы X - 10%
источник
15:29пожаловаться#4

AM

Alexey Milovidov in ClickHouse не тормозит
n1
@milovidov_an привет, я тут из-за твоего доклада про сборку clickhouse, есть пару вопросов. Если вы вкорячили большую часть musl, почему было не всунуть её всю? Говорил, что fuzzing включаете на час, как это происходит? Отдельная джоба на ci, или сервис, как у гугла, куда закидываете бинарник и потом ждёте от него вестей (по почте?)?
Если втянуть весь Musl, то не получится открывать динамические библиотеки (для ODBC драйверов и для CatBoost). Скорее всего там есть способ, но придётся ещё сильно помучаться.

Ещё проблема в мелочах с разными несовместимостями при сборке 3rd-party библиотек (надо исправлять).

Фаззинг в течение часа делается в CI, отдельной задачей, в каждом pull request.
источник
15:29пожаловаться#5

n

n1 in ClickHouse не тормозит
Alexey Milovidov
Если втянуть весь Musl, то не получится открывать динамические библиотеки (для ODBC драйверов и для CatBoost). Скорее всего там есть способ, но придётся ещё сильно помучаться.

Ещё проблема в мелочах с разными несовместимостями при сборке 3rd-party библиотек (надо исправлять).

Фаззинг в течение часа делается в CI, отдельной задачей, в каждом pull request.
Понял, спасибо
источник
15:33пожаловаться#6

DC

Denny Crane [not a Y... in ClickHouse не тормозит
T
Всем привет, никто не сталкивался с таким, делаешь select count(*) получаешь определенное значение X, выполняю insert select, и получаешь каунт с итоговой таблицы X - 10%
что если поставить set read_backoff_min_latency_ms=0
Какая версия КХ у вас?
источник
15:33пожаловаться#7

T

T in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
что если поставить set read_backoff_min_latency_ms=0
Какая версия КХ у вас?
до этого какая была не запомнил, думал дело в версии и поставил самую свежую 21.3.3.14-2. Но результат такой же
источник
15:35пожаловаться#8

DC

Denny Crane [not a Y... in ClickHouse не тормозит
T
до этого какая была не запомнил, думал дело в версии и поставил самую свежую 21.3.3.14-2. Но результат такой же
движок какой у таблицы в которую льете?
источник
15:36пожаловаться#9

T

T in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
движок какой у таблицы в которую льете?
mergetree на которую лью тоже
источник
15:37пожаловаться#10

YY

Yury Yurochko in ClickHouse не тормозит
Slach
а если sha256 ?
вообще тут интересно, по идее пароль передается в открытом виде в протоколе по TCP

можете tcpdump снять чтобы сравнить что отсылает clickhouse-go и clickhouse-client?
кек, судя по дампу, goшный драйвер потерял символ + из пароля по дороге...
источник
15:37пожаловаться#11

DC

Denny Crane [not a Y... in ClickHouse не тормозит
T
mergetree на которую лью тоже
и сколько строк? что если у таблицы в которую инсерт, для теста сделать engine=Log  ?
источник
15:39пожаловаться#12

M

Mishanya in ClickHouse не тормозит
T
mergetree на которую лью тоже
дак может прост мерж срабатывает ? особенно если делать count(*)
источник
15:41пожаловаться#13

T

T in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
и сколько строк? что если у таблицы в которую инсерт, для теста сделать engine=Log  ?
select count(*) from db.table1 where record_type = 6 // 358960865
insert into db.table2 select * from db.table1 where record_type = 6
select count(*) from db.table2; // 358681260
источник
15:41пожаловаться#14

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Mishanya
дак может прост мерж срабатывает ? особенно если делать count(*)
и что мерж меняет для движка mergetree ?
источник
15:42пожаловаться#15

DC

Denny Crane [not a Y... in ClickHouse не тормозит
T
select count(*) from db.table1 where record_type = 6 // 358960865
insert into db.table2 select * from db.table1 where record_type = 6
select count(*) from db.table2; // 358681260
это с engine=Log ?
источник
15:45пожаловаться#16

T

T in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
это с engine=Log ?
нет, как было с mergetree, сейчас вот создаю таблицу с такой же структурой но с движком Log
источник
15:45пожаловаться#17

M

Mishanya in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
и что мерж меняет для движка mergetree ?
ну мб я путаю с суммингмерж три

есть две записи в таблице А
insert into B select * from A

в таблице B после мержа count(*) может вернуть 1, а не 2, тк те две записи смержились в одну
источник
15:46пожаловаться#18

S

Slach in ClickHouse не тормозит
Yury Yurochko
кек, судя по дампу, goшный драйвер потерял символ + из пароля по дороге...
хм, интересненько, к сожалению сейчас go драйвером толком никто не занимается, если у вас получится сделать PR и сделать тест, то можно вмержить
источник
15:49пожаловаться#19

YY

Yury Yurochko in ClickHouse не тормозит
yeap, постараюсь дойти до этого)
источник
15:49пожаловаться#20