Сводная самооценка для команды. Она использует общую пятиуровневую шкалу (Инициирование, Развитие, Стандартизация, Управление, Оркестрация) в двух видах: шесть измерений программы метрик и области метрик, охваченные частями со 2 по 10. Она занимает около часа. Это инструмент разговора, а не сертификация, и она не то же самое, что шкалы зрелости процессов в ITIL, ISO/IEC 33000 или Модели зрелости возможностей. Результаты остаются у команды (см. тему 11.4, Модель зрелости для программ метрик).

Как её проводить

  1. Соберите команду на час с ведущим, который не является руководителем команды. Покажите шкалу ниже.
  2. Отмечайте в одиночку. Каждый отмечает уровень, на котором, по его мнению, находится команда, для каждой строки, самостоятельно.
  3. Сравните и обсудите. Различия раскрывают разный опыт одной и той же практики. Просите пример для каждого заявленного уровня («Какое решение в прошлом квартале?»).
  4. Согласуйте вид команды и запишите свидетельства за ним.
  5. Выберите один-два малых следующих шага, каждый выполнимый за квартал, с владельцем и датой. Поместите их в реестр улучшений (см. тему 9.5, Метрики непрерывного улучшения).
  6. Оставьте результат у команды. За пределами команды делитесь только агрегированными диапазонами и темами. Никогда не усредняйте строки в одну оценку и никогда не ранжируйте команды.

Переоценивайте примерно два раза в год и после реорганизации, смены инструмента или нарушения хартии метрик. Ждите, что некоторые строки откатятся, и трактуйте это как информацию.

Шкала

Уровень Название Как это выглядит
1 Инициирование Команда признаёт практику, но не имеет последовательного способа её выполнять. Работа разовая, зависит от отдельных людей и в основном недокументирована.
2 Развитие У некоторых команд есть работающие практики, но они различаются от команды к команде. Ранние инструменты, шаблоны и привычки существуют, но не разделяются и не ожидаются.
3 Стандартизация Общий лёгкий подход записан и используется в командах. Роли ясны. Подход есть отправная точка, которую команды могут адаптировать с заявленной причиной.
4 Управление Результаты измеряются и пересматриваются. Пробелы ведут к работе по улучшению, которая планируется и обеспечивается ресурсами.
5 Оркестрация Практика координируется между командами, поставщиками и клиентами и непрерывно адаптируется по мере изменения условий. Улучшение рутинно и идёт от каждого.

Выше не всегда лучше. Выберите уровень, подходящий вашему размеру, риску и нуждам, и запишите почему.

Вид 1: программа метрик

Измерение 1 Инициирование 2 Развитие 3 Стандартизация 4 Управление 5 Оркестрация
Вопросы и назначение Меры собираются, потому что данные есть Некоторые команды называют вопросы, которые задают Аудитории и вопросы записаны; меры сопоставлены им Охват вопросов пересматривается; неотвеченные вопросы порождают новые меры Аудитории, включая клиентов и поставщиков, формируют меры
Определения и владение Определения различаются по людям Некоторые записаны; неформальные владельцы Каталог с определением, источником, владельцем и пределами Полнота определений и оспаривания управляются Определения принадлежат совместно командам и поставщикам
Данные и инструменты Вручную и хрупко Некоторые автоматизированные фиды Проверенные конвейеры, общее хранилище, переносимые данные Надёжность, сверка и готовность к выходу управляются Федеративные конвейеры с общими контрактами
Использование в решениях Числа показываются, редко используются Используются в некоторых пересмотрах Регулярные пересмотры, записывающие решения Свидетельства решений отслеживаются, и по ним действуют Решения связаны между командами с результатами
Доверие и безопасность Страх или безразличие Устные заверения Письменная хартия; виды отдельных людей отключены; опрос безопасности Нарушения пересматриваются открыто; сигналы откровенности управляются Доверие рутинно; программа формируется персоналом и партнёрами
Пересмотр и эволюция Нет Редкая чистка Периодический пересмотр с командами; правило вывода Шаги оценки финансируются и завершаются Программа непрерывно улучшается от каждого

Вид 2: области метрик

Для каждой области отметьте уровень, лучше всего описывающий, как ваша команда измеряет и использует её сегодня. Пропускайте области, которые не применимы. Подсказки суть примеры того, что может сказать команда уровня 3.

Область Основная часть Команда уровня 3 может сказать
Поток и непрерывная поставка Часть 2 Мы знаем наши время выполнения и время цикла как распределения, ограничиваем работу в процессе и читаем скорость поставки рядом со стабильностью (см. тему 2.8, Метрики DORA).
Служба поддержки, инциденты и запросы Часть 3 Мы измеряем время до полезного решения вместе с возвратными обращениями, и у наших крупных инцидентов есть стандартный разбор (см. тему 3.4, Метрики крупных инцидентов).
Проблемы, изменения и релизы Часть 4 Наши изменения идут по пути, соразмерному риску, и мы отслеживаем переделки и цену известных ошибок (см. тему 4.3, Метрики управления изменениями).
Уровень услуг, доступность и надёжность Часть 5 Наши уровни услуг определены из результатов пользователей, с бюджетом ошибок, используемым в решениях (см. тему 5.2, SLI, SLO и бюджеты ошибок).
Клиенты и опыт Часть 6 Мы спрашиваем пользователей об их опыте способами, которые их не утомляют, и действуем по ответам (см. тему 6.2, Соглашения об уровне опыта).
Активы, конфигурация и финансы Часть 7 Мы знаем, чем владеем и что ведём, и цену на единицу использования наших услуг (см. тему 7.5, Стоимость услуг и удельная экономика).
Безопасность, риски, соответствие и поставщики Часть 8 Наши свидетельства рисков и контролей реальны, поставщики измеряются по результатам, и ничто из этого не подгоняется под аудит (см. тему 8.2, Метрики рисков и контролей).
Люди, команды и улучшение Часть 9 Мы слышим от наших людей о темпе и благополучии и отслеживаем работу по улучшению до результатов (см. тему 9.1, Здоровье команды и опыт разработчиков).
Метрики для ИИ, автоматизации и аналитики Часть 10 Мы сравниваем работу с помощью ИИ с базовым уровнем, выбираем выводы на полезность и регистрируем наши использования ИИ (см. тему 10.1, ИИ в измерении управления услугами). У наших автоматизаций и конвейеров есть владельцы, проверки после запуска и испытанный способ отмены (см. тему 10.6, Метрики автоматизации и оркестрации, и тему 10.7, Метрики конвейеров и автоматизированных изменений). Мы показываем качество данных и неопределённость рядом с числами и сверяем наши прогнозы с фактами (см. тему 10.8, Метрики аналитики и качества данных, и тему 10.9, Метрики прогнозирования и предиктивной аналитики).
Основы ITIL 5 Часть 1 У нас есть карта имущества с владельцами, утверждения о результатах со свидетельствами и журнал проверки утверждений об ITIL 5, каждое помечено как проверенное или неподтверждённое (см. тему 1.8, Измерение ITIL 5 и результаты для ценности).

Запись результата

Команда: [название]   Дата: [дата]   Ведущий: [имя]
Участники: [роли]

Вид 1
| Измерение | Вид команды | Свидетельство | Следующий шаг (владелец, дата) |
| [строка] | [1-5] | [пример] | [шаг] |

Вид 2
| Область | Вид команды | Свидетельство | Следующий шаг |
| [строка] | [1-5 или н/п] | [пример] | [шаг] |

Различия, которые нас удивили: [заметки]
Для чего мы никогда не будем это использовать: [ранжирование, финансирование, оценки результативности]
Следующая оценка: [дата]

Чтение профиля

  • Ищите ограничивающую строку. Доверие и определения часто ограничивают остальные. Малый выигрыш там может разблокировать остальное.
  • Сравнивайте строки, а не команды. Полезный вопрос в том, где ваша команда сильнее или слабее, а не как она сравнивается с другой.
  • Спрашивайте, что изменилось. Рост за квартал должен подкрепляться решением, привычкой или результатом, который вы можете назвать. Рост без свидетельств говорит, что отметка была оптимистичной.
  • Остановитесь на достаточно хорошем. Команда может разумно оставаться на уровне 3 в некоторых строках годами.