Ну он не может подобрать нормально, так как ты можешь стопнуть в холостом режиме, а далее будет тяжёлая функция - привет, нагрузили в х2.
По сути это как с FPS - ошибка предположения всегда возможна, и всегда происходить.
Он пытается не трогать, если память не сильно сегментированна и нету постоянных аллокаций.
Те пулы - твои друзья.
Ну или линейная память.