Сравнение оценок с фактическими значениями

Отказ от точечных оценок и лучших случаев — всего лишь половина дела. Другой половиной должно стать сравнение фактических результатов с оцениваемыми, чтобы вы могли подрегулировать свои личные способности к оценке.

Ведите список оценок и дополняйте его фактическими результатами по завершении проекта. Затем вычислите величину относительной ошибки (MRE, Magnitude of Relative Error) своих оценок (Conte, Dunsmore, and Shen 1986). MRE вычисляется по следующей формуле:

MRE = АбсолютноеЗначение х [(ФактическийРезультат - ОценкаРезультата)/Фактический- Результат].

В табл. 9.5 приведены результаты вычисления MRE для оценок лучшего и худшего случаев из предыдущего примера.

Таблица 9.5. Пример таблицы для отслеживания точности отдельных оценок

Функция Оценка времени реализации (в днях)

В этой таблице для каждой оценки вычисляется относительная ошибка (MRE). Ее среднее значение по набору оценок, показанное в нижней строке, составляет %.

СОВЕТ № 46

Сравнивайте оценки с фактическими результатами, чтобы повышать качество своих оценок со временем.

Сравнивая оценки с результатами, попытайтесь понять, что было сделано верно, что неверно, что вы упустили, и как избежать повторения этих ошибок в будущем.

Другим средством организации обратной связи и повышения точности оценок является общественное обсуждение. Я работал с компаниями, в которых разработчики должны были на собраниях по понедельникам сообщать, в какой степени их оценки соответствовали результатам. Таким образом укреплялись представления о точности оценок как об одном из стратегических приоритетов компании.

Какой бы способ вы ни выбрали, ключевой принцип остается одним и тем же: организация цикла обратной связи на основании фактических оценок, чтобы ваши оценки улучшались со временем. Чтобы обратная связь была эффективной, она должна быть своевременной; задержка снижает эффективность цикла обратной связи (Jorgensen 2002).

Дополнительные ресурсы

Jorgensen, М. «А Review of Studies on Expert Estimation of Software Development Effort», 2002. В статье приводится разносторонний обзор исследований в области экспертных оценок. Автор пользуется многими выводами, полученными в ходе стандартных исследований, и представляет 12 рекомендаций для достижения точных экспертных оценок.

Humphrey, Watts S. «А Discipline for Software Engineering». Reading, MA: Addison-Wesley, 15. Хамфри излагает подробную методологию для сбора разработчиками личных данных производительности, сравнения запланированных результатов с фактическими и постепенного совершенствования оценок.

Stutzke, Richard D. «Estimating Software-Intensive Systems». Upper Saddle River, NJ: Addison-Wesley, 2005. В главе 5 книги Стуцке рассматриваются методы экспертных оценок, а также приводятся математические обоснования некоторых формул, упоминавшихся в этой главе.