В целом, твоя проблема делится на три 1) Сделать локальную версию либы и заставить приложение использовать её 2) Перекомпилировать либу при изменениях в либе 3) Перекомпилировать CRA при изменениях в зависимостях
Конфигурация вебпака, которая игнорирует node_modules зашита в react-scripts, и тебе нужно или сделать eject чтобы выпустить кишки react-scripts наружу и получить доступ к "низкоуровневому конфигу", от которого они тебя и абстрагируют, ИЛИ найти способ сделать то же самое через react-app-rewired или что-то подобное