Распространенные определения «хороших» оценок

Даже разобравшись с тем, что такое «оценка», мы остаемся с другим вопросом: что такое хорошая оценка? Эксперты предлагают разные определения хороших оценок. Кейперс Джонс (Capers Jones) утверждал, что точность ±10 % достижима, но только в проектах с высокой степенью контроля (Jones 1998).

В 1986 году профессоры Конт, Дансмор и Шен предположили, что хорошая оценка должна в 75 % случаев отличаться от фактического результата не более чем на 25 % (Conte, Dunsmore, Shen 1986). Этот стандарт до настоящего времени является самым распространенным для выражения точности оценок (Stutzke 2005).

1.5. Распространенные определения «хороших» оценок 29

Различные компании сообщали о результатах, близких к критерию точности, предложенному Контом, Дансмором и Шеном. На рис. 1.6 показаны оценки и фактические результаты для ряда проектов ВВС США.

Уровень СММ организации, проводящей проект

Источник: «Корреляционный анализ СММ и эффективности разработки программного обеспечения» (Lawlis, Flowe and Thodahl, 1995)

Рис. 1.6. Улучшение качества оценок в проектах ВВС США. Предсказуемость проектов существенно улучшилась с переходом организаций на более высокие уровни СММ[2]

На рис. 1.7 изображены результаты аналогичной программы повышения эффективности в компании «Боинг».

1              2              3              4              5

Уровень СММ

Рис.

Последний аналогичный пример на рис. 1.8 был получен при улучшении результатов оценки в Schlumberger.

30 Глава 1 • Что такое «оценка»?

35 30 25 20

Среднее превышение 15 (в неделях)

10

5

0

Одна из моих компаний-клиентов завершает 97 % своих проектов вовремя и в рамках бюджета. Компания Telcordia сообщает, что ей удается завершать 98 % проектов в срок и без нарушения бюджета (Pitterman 2000). Аналогичные результаты публиковались множеством других компаний (Pitnam and Myers 2003). Организации создают хорошие оценки как по определению Джонса, так и по определению Конта, Дансмора и Шена. Тем не менее в обоих определениях отсутствует одна важная концепция — а именно то, что точность результатов оценки не достигается за счет одних лишь методик оценки. Она также должна поддерживаться эффективным управлением проектом.