"Метрика качества по релизам"

Внезапно возникла необходимость оценки качества релизов на различных проектах. Собственно входные условие следующие:

  • С десяток проектов
  • На каждом проекте своя команда разработки и тестирования
  • На каждом проекте от 0.5 до 3 тестировщиков
  • Релизы происходят у каждой команды в разное время (от 1 раз в месяц до 1 раза в полгода)
  • Циклы (итерации) у каждой команды разные (от 1 недели до 2х недель)
  • Оценка должна показывать качество выпущенного релиза:
  • как за определенный отрезок времени (2 недели, месяц)
  • так и за релиз (отрезок времени между релизами)

Долго думали. Не буду мучать различными вариантами. В итоге вывели формулу:

(Sрелиз/ Sобщ) * 100% = Q

где

Sрелиз - количество дефектов найденое в процессе эксплуатации

Sобщ - количество дефектов найденое в процессе разработки

Формула мягко говоря очень общая, но пока ничего лучшего придумано не было