ну и не бывает идеальных процессов, всегда часть энергии системы уходит в тепло (хаос)

Граждане, а посоветуйте что-нибудь полезное для здоровья.

Есть сервис на твистеде, принимает tcp соединения и клиенты там висят довольно долго. Сервис ходит в монгу. Когда-то давно люди засунули туда mongoengine и работало это дело довольно грустно, потому что блокировалось на вызовах в базу.

Я чуть не помер, но mongoengine выкинул, прикрутил связку motor + pydantic, включил asyncioreactor, стал тестировать и почти сутки был доволен результатами, пока не оказалось, что оно ведет себя как на картинке - нормально работает часами, а потом зачем-то одномоментно хапает память, и начинает жрать проц как не в себя, при этом метрики прометею отдает, судя по тому что они есть, а вот клиентам почти нихера не отвечает.

Что тут можно дебажить? Куда смотреть? py-spy я расчехлил и в следующий глюк посмотрю что он там покажет, если он что-нибудь интересное покажет конечно, но может есть какие идеи что там в нем за зло накапливается?

У мотора треды в тредпуле заканчиваются? ХЗ даже что думать )

Граждане, а посоветуйте что-нибудь полезное для здоровья.

Есть сервис на твистеде, принимает tcp соединения и клиенты там висят довольно долго. Сервис ходит в монгу. Когда-то давно люди засунули туда mongoengine и работало это дело довольно грустно, потому что блокировалось на вызовах в базу.

Я чуть не помер, но mongoengine выкинул, прикрутил связку motor + pydantic, включил asyncioreactor, стал тестировать и почти сутки был доволен результатами, пока не оказалось, что оно ведет себя как на картинке - нормально работает часами, а потом зачем-то одномоментно хапает память, и начинает жрать проц как не в себя, при этом метрики прометею отдает, судя по тому что они есть, а вот клиентам почти нихера не отвечает.

Что тут можно дебажить? Куда смотреть? py-spy я расчехлил и в следующий глюк посмотрю что он там покажет, если он что-нибудь интересное покажет конечно, но может есть какие идеи что там в нем за зло накапливается?

У мотора треды в тредпуле заканчиваются? ХЗ даже что думать )

Граждане, а посоветуйте что-нибудь полезное для здоровья.

Есть сервис на твистеде, принимает tcp соединения и клиенты там висят довольно долго. Сервис ходит в монгу. Когда-то давно люди засунули туда mongoengine и работало это дело довольно грустно, потому что блокировалось на вызовах в базу.

Я чуть не помер, но mongoengine выкинул, прикрутил связку motor + pydantic, включил asyncioreactor, стал тестировать и почти сутки был доволен результатами, пока не оказалось, что оно ведет себя как на картинке - нормально работает часами, а потом зачем-то одномоментно хапает память, и начинает жрать проц как не в себя, при этом метрики прометею отдает, судя по тому что они есть, а вот клиентам почти нихера не отвечает.

Что тут можно дебажить? Куда смотреть? py-spy я расчехлил и в следующий глюк посмотрю что он там покажет, если он что-нибудь интересное покажет конечно, но может есть какие идеи что там в нем за зло накапливается?

У мотора треды в тредпуле заканчиваются? ХЗ даже что думать )

pyspy должен помочь, не раз выручал. Кажется что причина в каком-то баге, а память уже следствие.
Я правильно понял, что 1.0 - это 100% одного ядра?

Да, это собственное ядро процесса

motor мультипоточный. Если бы он весь целиком решил затупить, то мог бы выжрать больше одного ядра и было бы видно что все его треды напрягаются.

Ну, в питоне же тред не может несколько ядер выжрать. Только если на C GIL отпускает

В тему про химию, нахер она нужна...

https://lenta.ru/news/2021/03/26/fire_podrobnosti/

мужчина начал курить в кислородной маске, из-за чего прямо около его лица произошел хлопок. 
Он получил множественные ожоги и сейчас находится в реанимации. Кроме того, пострадала одна женщина.

Господа, оффтоп. Я тут собираюсь окна менять. Как я понимаю расклады, есть три типа окон:

- Kaleva - дорого, но вроде как качественно. Производство полного цикла
- Rehau - это только профили. Все прочие детали собираются со всего мира, и в смысле результата мы целиком полагаемся на рукожопие сборщиков.
- Третий вариант. То же, что и Rehau, но без Rehau.

Что делать? Что посоветуете?

Господа, оффтоп. Я тут собираюсь окна менять. Как я понимаю расклады, есть три типа окон:

- Kaleva - дорого, но вроде как качественно. Производство полного цикла
- Rehau - это только профили. Все прочие детали собираются со всего мира, и в смысле результата мы целиком полагаемся на рукожопие сборщиков.
- Третий вариант. То же, что и Rehau, но без Rehau.

Что делать? Что посоветуете?