W
Там 3хзвенка получилась. микро-микросервис, микросервис-агрегатор, микросервис-процессор результатов, он-же запросник.
Size: a a a
2021 June 24
W
А асинк на микро-микросервисе нужен если туда ходят больше одного (чего сейчас нету, но потом может быть при развитии архитектуры).
YK
смахивает на оверинжиниринг - как понимаю затея в том чтобы ускорить отдачу при том что ресурсов хватает, а если в микросервис будет ходить несколько, то время ожидания увеличится, ну и введение среднего звена тоже скорости не добавит
W
Нет. Там у человека проблема в том что если тупо все положить в память и сделать дофига процессов, то память кончится. Он хотел побить по блокам, чтобы больше утилизировать процессор (параллельный поиск и вот это все).
W
Ну и нагрузка у него там есть довольно большая.
W
Так что тачек возможно надо больше одной (не возможно, а даже, скорее всего).
YK
вроде он выше писал, что основная идея расшардить фильтрацию на 10 и радоваться если упадут с 40мс до 15
W
Ну он не может запустить просто 10 инстансов. Памяти мало.
YK
юзать mmap, или, да, несколько серверов
ну и сдаётся, что если в памяти процессов микросервиса хранить только данные для фильтрации, то всё там будет ок
ну и сдаётся, что если в памяти процессов микросервиса хранить только данные для фильтрации, то всё там будет ок
W
Там фильтруется по всем параметрам объекта.... Короче хитрожопость не проходит.
W
А так он просто начинает больше использовать CPU.
W
Так что да, разбитие на шарды и параллельный поиск - наше все.
2021 June 25
YK
он как раз хотел ускориться за счёт cpu
в плане памяти тут конечно надо узнать у топик-стартера, но
скажем 100 полей по 100 байт на 10000 сущностей ~ 100mb, если хотят ускориться 10х, то на одной тачке с 80 cpu будет ~ 72 микросервиса и 7 web-воркеров
72*100 ~ 8Гб, должно хватить )
в плане памяти тут конечно надо узнать у топик-стартера, но
скажем 100 полей по 100 байт на 10000 сущностей ~ 100mb, если хотят ускориться 10х, то на одной тачке с 80 cpu будет ~ 72 микросервиса и 7 web-воркеров
72*100 ~ 8Гб, должно хватить )
W
Короче, насколько я его понял ему подходит этот вариант, он к тому-же еще и горизонтально масштабируемый (до определенных пределов), понятно куда двигаться дальше для ускорения, ужатия по памяти, если надо и т.д.
W
Причем в конце мы немного отыграли назад в угоду управляемости процессом. Так что... Если хочется подробностей - идите к нему работать )))
И
Кто-нибудь знает как можно из пакетов в $deb обратиться не дописывая $main?
index.pl
index.pl
#!/usr/bin/perlA.pm
use strict;
use warnings;
use A;
our $deb = 'test';
...
use strict;B.pm
use warnings;
use B;
print $main::deb;
use strict;Мне казалось, что когда-то такое встречал, но не могу вспомнить, что нужно сделать чтобы сразу $deb писать в пакетах. Или так нельзя и я перегрелся?))
use warnings;
print $main::deb;
P
а почему $main:deb, а не $A::deb ?
P
а блин вижу
P
но что-то мне кажется этого лучше даже не хотеть делать
И
Это не на прод, это отладка.