MK
исправил картинку. попробую натравить трассировщик, остальные идеи и предположения, что может быть не так, как-то закончились.
А разве в p_executor не надо тоже сабмитить?
Size: a a a
2021 March 27
E
А разве в p_executor не надо тоже сабмитить?
так в него сабмитится в t_worker
MK
А, ой
MK
А лог после цикла но до выхода из контекста сработает?
A🚀
Есть догадка что process pool executor не threadsafe просто
E
А лог после цикла но до выхода из контекста сработает?
да, первое сообщение выводится (exiting thread pool) второе тоже, но дальше всё...
E
Есть догадка что process pool executor не threadsafe просто
Хорошая идея, можно попробовать поставить lock на submit в process pool
A🚀
Хм... не
A🚀
Форкать когда треды запущены не лучшая идея
E
Форкать когда треды запущены не лучшая идея
Он форкает при submit?
A🚀
Честно говоря не знаю, но если он форкает пока держит какой то лок то этом может быть проблемой
E
Честно говоря не знаю, но если он форкает пока держит какой то лок то этом может быть проблемой
Я когда-то ковырялся в коде mp, но уже смутно помню в какой момент там происходит создание процессов-воркеров, в которые через очередь попадают задачи из submit. Но то о чём ты говоришь вполне возможно.
A🚀
Можно попробовать префоркнуть как нибудь
E
Можно попробовать префоркнуть как нибудь
форкает в момент submit пока есть свободные воркеры
E
в общем, можно до запуска потоков создать своего собственного воркера/воркеров и через очередь отдавать туда данные из потоков
2021 March 28
E
Что больше всего раздражает, так это то, что ни один из основных разработчиков даже не отписался там, хотя их несколько раз упоминали и звали сделать review.
2021 March 29
Б
А как лучше подкопаться к заголовкам запроса
aiohttp и нормально их декодировать?Б
Есть
Можно по цепочке унаследоваться от них и поменять в итоге, но мб получше вариант есть?
aiohttp.http_parser.HeadersParser, но он захардкожен в HttpRequestParser, который захардкожен в aiohttp.web_protocol.RequestHandler, который захардкожен в aiohttp.web_server.ServerМожно по цепочке унаследоваться от них и поменять в итоге, но мб получше вариант есть?
DB
Есть
Можно по цепочке унаследоваться от них и поменять в итоге, но мб получше вариант есть?
aiohttp.http_parser.HeadersParser, но он захардкожен в HttpRequestParser, который захардкожен в aiohttp.web_protocol.RequestHandler, который захардкожен в aiohttp.web_server.ServerМожно по цепочке унаследоваться от них и поменять в итоге, но мб получше вариант есть?
ASGI-мидлваря?
DB
можно прям перед aiohttp ещё попробовать это всё декодировать