Но тебе потом всё равно придётся в основной как-то интегрироваться
Ну вот что пишут: Используйте FixedUpdate вместо Update когда работаете с Rigidbody. В среднем он вызывается 50 раз в секунду. Хм... Всё-таки физика обновляется реже графики в нормальной ситуации. А я почему-то всегда думал что наоборот. Ну даже если так, то нет же смысла обновлять инпут чаще чем FixedUpdate если он влияет на объекты, подчиняющиеся физике. И точно так же с низким фпс лучше использовать для ввода FixedUpdate в обычной ситуации когда просадка производительности упирается в рендер картинки, а не в рассчёт физики.