Какие метрики использовались в вашем опыте тестирования?

• Дефекты:

  • Общее количество найденных дефектов.
  • Плотность дефектов (количество дефектов на единицу размера продукта, например, на 1000 строк кода или на функциональную область).
  • Скорость нахождения дефектов (количество дефектов, найденных за единицу времени).
  • Скорость исправления дефектов (количество дефектов, исправленных за единицу времени).
  • Распределение дефектов по серьезности (Critical, Major, Minor, Trivial).
  • Распределение дефектов по типам (функциональные, UI, производительность и т.д.).
  • Процент повторно открытых дефектов (Reopened).

• Тестовое покрытие:

  • Покрытие требований (процент требований, покрытых тест-кейсами).
  • Покрытие кода (строковое, ветвевое, покрытие условий, если использовались инструменты анализа покрытия кода).
  • Покрытие тестовых сценариев (процент разработанных или выполненных тест-кейсов).

• Эффективность выполнения тестов:

  • Количество выполненных и проваленных тест-кейсов.
  • Процент успешного прохождения тест-кейсов.
  • Время выполнения тестовых наборов (для автоматизации).
  • Производительность тестирования (количество выполненных тест-кейсов за единицу времени).

• Показатели производительности и нагрузки (если проводилось соответствующее тестирование):

  • Время отклика системы.
  • Пропускная способность (количество транзакций в секунду).
  • Использование ресурсов (CPU, память, диск).
  • Количество одновременных пользователей.

• Метрики автоматизации тестирования:

  • Процент автоматизированных тест-кейсов.
  • Количество автоматизированных регрессионных тестов.
  • Стабильность автоматизированных тестов (частота ложноотрицательных результатов).
  • Время на разработку и поддержку автоматизированных тестов.

• Метрики удовлетворенности клиентов (косвенно, через отзывы, количество инцидентов в эксплуатации).

Эти метрики помогали оценивать прогресс тестирования, качество продукта, эффективность тестовых активностей и принимать решения об этапе релиза.