DC
Ну я думал в эту сторону, но почему то у меня сначала зародилось сомнение, можно ли на репликах читать с одного топика. Попробую добавить текущий timestamp (его нет, да), спасибо
можно и нужно.
Size: a a a
2020 June 25
DP
можно и нужно.
А именно на чтение с кафик дедупликацию отключить нельзя?
DC
А именно на чтение с кафик дедупликацию отключить нельзя?
не знаю, зачем вам одинаковые сообщения-то? добавьте в свою таблицу _partition _offset и все, даже полезно, дубликаты разбирать
DP
не знаю, зачем вам одинаковые сообщения-то? добавьте в свою таблицу _partition _offset и все, даже полезно, дубликаты разбирать
Справедливо
Y
70мс, это медленно? вы там на спидах что-ли все? у меня запросы по 40 мин. работают, вот это медленно.
нет, вопросы уже к DataGrip. Но он больше для удобства, не для скорости
DC
нет, вопросы уже к DataGrip. Но он больше для удобства, не для скорости
150мс, джава приложение с UI, непонятно чего вы ожидаете
select 1 из DG сколько выполняется?
select 1 из DG сколько выполняется?
Y
150мс, джава приложение с UI, непонятно чего вы ожидаете
select 1 из DG сколько выполняется?
select 1 из DG сколько выполняется?
73ms
DT
так то надо еще пинг учитывать, который явно в клиенте на локалхосте не учитывается
DC
73ms
я уже говорил что летенси, у меня например до половины КХ пинг 150мс
Y
я уже говорил что летенси, у меня например до половины КХ пинг 150мс
напр.
CH: 8873898 rows in set. Elapsed: 0.137 sec. Processed 8.87 million rows, 70.99 MB (64.87 million rows/s., 518.96 MB/s.)
DG: execution: 1 s 456 ms, fetching: 41 ms
SELECT WatchID FROM tutorial.hits_v1;CH: 8873898 rows in set. Elapsed: 0.137 sec. Processed 8.87 million rows, 70.99 MB (64.87 million rows/s., 518.96 MB/s.)
DG: execution: 1 s 456 ms, fetching: 41 ms
DC
напр.
CH: 8873898 rows in set. Elapsed: 0.137 sec. Processed 8.87 million rows, 70.99 MB (64.87 million rows/s., 518.96 MB/s.)
DG: execution: 1 s 456 ms, fetching: 41 ms
SELECT WatchID FROM tutorial.hits_v1;CH: 8873898 rows in set. Elapsed: 0.137 sec. Processed 8.87 million rows, 70.99 MB (64.87 million rows/s., 518.96 MB/s.)
DG: execution: 1 s 456 ms, fetching: 41 ms
ну 8873898 строк, это джава jdbc рендерит медленно строки в числа и снова в строки
Y
ну 8873898 строк, это джава jdbc рендерит медленно строки в числа и снова в строки
через HTTP
SELECT WatchID FROM tutorial.hits_v1 питоновским скриптом за 1.71 секDC
через HTTP
SELECT WatchID FROM tutorial.hits_v1 питоновским скриптом за 1.71 секну а курл сколько показыват? curl '....:8123:/?query=
SELECT%20WatchID%20FROM%20tutorial.hits_v1'Y
ну а курл сколько показыват? curl '....:8123:/?query=
SELECT%20WatchID%20FROM%20tutorial.hits_v1'сложно сказать он принтит каждый id
DC
-o /dev/null
Y
-o /dev/null
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 169M 0 169M 0 0 98.4M 0 --:--:-- 0:00:01 --:--:-- 98.5M
DC
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 169M 0 169M 0 0 98.4M 0 --:--:-- 0:00:01 --:--:-- 98.5M
и тот же курл прямо на сервере КХ ?
Y
и тот же курл прямо на сервере КХ ?
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 169M 0 169M 0 0 511M 0 --:--:-- --:--:-- --:--:-- 511M
DC
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 169M 0 169M 0 0 511M 0 --:--:-- --:--:-- --:--:-- 511M
т.е. в сеть упирается
а если enable_http_compression
curl '....:8123:/?enable_http_compression=1&query=
а если enable_http_compression
curl '....:8123:/?enable_http_compression=1&query=
SELECT%20WatchID%20FROM%20tutorial.hits_v1'Y
т.е. в сеть упирается
а если enable_http_compression
curl '....:8123:/?enable_http_compression=1&query=
а если enable_http_compression
curl '....:8123:/?enable_http_compression=1&query=
SELECT%20WatchID%20FROM%20tutorial.hits_v1'
% Total % Received % Xferd Average Speed Time Time Time Current
Dload Upload Total Spent Left Speed
100 169M 0 169M 0 0 107M 0 --:--:-- 0:00:01 --:--:-- 106M