Всем привет! Столкнулся с проблемой очереди на сервере.
Попробую расписать ситуацию:
1. Поступают множество запросов к эндпоинту который я написал на джанго.
2. Каждый запрос выполняет скрипт которому нужно большое количество ресурсов сервера для вычислений (конкретнее жрет библиотека Pandas).
3. Если потоков слишком много - сжираются все ресурсы и сервер падает.
Вопрос - как организовать очередь в рамках такой картины?
Яб херакнул еще один сервис, который бы принимал от твоего сервера запросы и просто добавлял бы их в очередь (структура данных), и там в бесконечном цикле бы гонял до появления нового