Ой, ну это я могла непонятно написать, с авто и покрытием ещё все более менее ясно, имела ввиду покрытие ручного тестирования конкретно, то как у кого высчитывается процент покрытого ручными тестами функционала, по заведённым тесткейсам? Отсюда как бы как вопрос про то как высчитывается и высчитывается ли качество выпускаемого продукта?
у нас не высчитывается процент покрытия ручными тестами. Думается мне, чтобы такое хотябы пробовать начинать делать, нужно детально расписывать и документировать требования, валидные именно на момент условной приемки - передачи задачи в тестирование. После того, как требования описаны, на их основе нужно смотреть, какой процент требований покрыт ручными кейсами. Как водится, требования не описывают все возможные вариации проверок и комбинаторики, получаемой в функционале. Поэтому тут нужно их каким-то образом визуализировать (диаграммы состояний и переходов, таблицы принятия решений, сценарии использования и так далее, плюс их комбинации). Короче это огромная ручная работа. И при этом это само по себе не является показателем качества ни продукта ни тестирования.
Качество выпускаемого продукта вообще крайне комплексная метрика, включающая в себя сбор различных метрик начиная с аналитики, продолжая разработкой, тестирования и заканчивая эксплуатацией