Самооценка зрелости
Сводная самооценка для команды. Она использует общую пятиуровневую шкалу (Инициирование, Развитие, Стандартизация, Управление, Оркестрация) в двух видах: шесть измерений программы метрик и области метрик, охваченные частями со 2 по 10. Она занимает около часа. Это инструмент разговора, а не сертификация, и она не то же самое, что шкалы зрелости процессов в ITIL, ISO/IEC 33000 или Модели зрелости возможностей. Результаты остаются у команды (см. тему 11.4, Модель зрелости для программ метрик).
Как её проводить
- Соберите команду на час с ведущим, который не является руководителем команды. Покажите шкалу ниже.
- Отмечайте в одиночку. Каждый отмечает уровень, на котором, по его мнению, находится команда, для каждой строки, самостоятельно.
- Сравните и обсудите. Различия раскрывают разный опыт одной и той же практики. Просите пример для каждого заявленного уровня («Какое решение в прошлом квартале?»).
- Согласуйте вид команды и запишите свидетельства за ним.
- Выберите один-два малых следующих шага, каждый выполнимый за квартал, с владельцем и датой. Поместите их в реестр улучшений (см. тему 9.5, Метрики непрерывного улучшения).
- Оставьте результат у команды. За пределами команды делитесь только агрегированными диапазонами и темами. Никогда не усредняйте строки в одну оценку и никогда не ранжируйте команды.
Переоценивайте примерно два раза в год и после реорганизации, смены инструмента или нарушения хартии метрик. Ждите, что некоторые строки откатятся, и трактуйте это как информацию.
Шкала
| Уровень | Название | Как это выглядит |
|---|---|---|
| 1 | Инициирование | Команда признаёт практику, но не имеет последовательного способа её выполнять. Работа разовая, зависит от отдельных людей и в основном недокументирована. |
| 2 | Развитие | У некоторых команд есть работающие практики, но они различаются от команды к команде. Ранние инструменты, шаблоны и привычки существуют, но не разделяются и не ожидаются. |
| 3 | Стандартизация | Общий лёгкий подход записан и используется в командах. Роли ясны. Подход есть отправная точка, которую команды могут адаптировать с заявленной причиной. |
| 4 | Управление | Результаты измеряются и пересматриваются. Пробелы ведут к работе по улучшению, которая планируется и обеспечивается ресурсами. |
| 5 | Оркестрация | Практика координируется между командами, поставщиками и клиентами и непрерывно адаптируется по мере изменения условий. Улучшение рутинно и идёт от каждого. |
Выше не всегда лучше. Выберите уровень, подходящий вашему размеру, риску и нуждам, и запишите почему.
Вид 1: программа метрик
| Измерение | 1 Инициирование | 2 Развитие | 3 Стандартизация | 4 Управление | 5 Оркестрация |
|---|---|---|---|---|---|
| Вопросы и назначение | Меры собираются, потому что данные есть | Некоторые команды называют вопросы, которые задают | Аудитории и вопросы записаны; меры сопоставлены им | Охват вопросов пересматривается; неотвеченные вопросы порождают новые меры | Аудитории, включая клиентов и поставщиков, формируют меры |
| Определения и владение | Определения различаются по людям | Некоторые записаны; неформальные владельцы | Каталог с определением, источником, владельцем и пределами | Полнота определений и оспаривания управляются | Определения принадлежат совместно командам и поставщикам |
| Данные и инструменты | Вручную и хрупко | Некоторые автоматизированные фиды | Проверенные конвейеры, общее хранилище, переносимые данные | Надёжность, сверка и готовность к выходу управляются | Федеративные конвейеры с общими контрактами |
| Использование в решениях | Числа показываются, редко используются | Используются в некоторых пересмотрах | Регулярные пересмотры, записывающие решения | Свидетельства решений отслеживаются, и по ним действуют | Решения связаны между командами с результатами |
| Доверие и безопасность | Страх или безразличие | Устные заверения | Письменная хартия; виды отдельных людей отключены; опрос безопасности | Нарушения пересматриваются открыто; сигналы откровенности управляются | Доверие рутинно; программа формируется персоналом и партнёрами |
| Пересмотр и эволюция | Нет | Редкая чистка | Периодический пересмотр с командами; правило вывода | Шаги оценки финансируются и завершаются | Программа непрерывно улучшается от каждого |
Вид 2: области метрик
Для каждой области отметьте уровень, лучше всего описывающий, как ваша команда измеряет и использует её сегодня. Пропускайте области, которые не применимы. Подсказки суть примеры того, что может сказать команда уровня 3.
| Область | Основная часть | Команда уровня 3 может сказать |
|---|---|---|
| Поток и непрерывная поставка | Часть 2 | Мы знаем наши время выполнения и время цикла как распределения, ограничиваем работу в процессе и читаем скорость поставки рядом со стабильностью (см. тему 2.8, Метрики DORA). |
| Служба поддержки, инциденты и запросы | Часть 3 | Мы измеряем время до полезного решения вместе с возвратными обращениями, и у наших крупных инцидентов есть стандартный разбор (см. тему 3.4, Метрики крупных инцидентов). |
| Проблемы, изменения и релизы | Часть 4 | Наши изменения идут по пути, соразмерному риску, и мы отслеживаем переделки и цену известных ошибок (см. тему 4.3, Метрики управления изменениями). |
| Уровень услуг, доступность и надёжность | Часть 5 | Наши уровни услуг определены из результатов пользователей, с бюджетом ошибок, используемым в решениях (см. тему 5.2, SLI, SLO и бюджеты ошибок). |
| Клиенты и опыт | Часть 6 | Мы спрашиваем пользователей об их опыте способами, которые их не утомляют, и действуем по ответам (см. тему 6.2, Соглашения об уровне опыта). |
| Активы, конфигурация и финансы | Часть 7 | Мы знаем, чем владеем и что ведём, и цену на единицу использования наших услуг (см. тему 7.5, Стоимость услуг и удельная экономика). |
| Безопасность, риски, соответствие и поставщики | Часть 8 | Наши свидетельства рисков и контролей реальны, поставщики измеряются по результатам, и ничто из этого не подгоняется под аудит (см. тему 8.2, Метрики рисков и контролей). |
| Люди, команды и улучшение | Часть 9 | Мы слышим от наших людей о темпе и благополучии и отслеживаем работу по улучшению до результатов (см. тему 9.1, Здоровье команды и опыт разработчиков). |
| Метрики для ИИ, автоматизации и аналитики | Часть 10 | Мы сравниваем работу с помощью ИИ с базовым уровнем, выбираем выводы на полезность и регистрируем наши использования ИИ (см. тему 10.1, ИИ в измерении управления услугами). У наших автоматизаций и конвейеров есть владельцы, проверки после запуска и испытанный способ отмены (см. тему 10.6, Метрики автоматизации и оркестрации, и тему 10.7, Метрики конвейеров и автоматизированных изменений). Мы показываем качество данных и неопределённость рядом с числами и сверяем наши прогнозы с фактами (см. тему 10.8, Метрики аналитики и качества данных, и тему 10.9, Метрики прогнозирования и предиктивной аналитики). |
| Основы ITIL 5 | Часть 1 | У нас есть карта имущества с владельцами, утверждения о результатах со свидетельствами и журнал проверки утверждений об ITIL 5, каждое помечено как проверенное или неподтверждённое (см. тему 1.8, Измерение ITIL 5 и результаты для ценности). |
Запись результата
Команда: [название] Дата: [дата] Ведущий: [имя]
Участники: [роли]
Вид 1
| Измерение | Вид команды | Свидетельство | Следующий шаг (владелец, дата) |
| [строка] | [1-5] | [пример] | [шаг] |
Вид 2
| Область | Вид команды | Свидетельство | Следующий шаг |
| [строка] | [1-5 или н/п] | [пример] | [шаг] |
Различия, которые нас удивили: [заметки]
Для чего мы никогда не будем это использовать: [ранжирование, финансирование, оценки результативности]
Следующая оценка: [дата]
Чтение профиля
- Ищите ограничивающую строку. Доверие и определения часто ограничивают остальные. Малый выигрыш там может разблокировать остальное.
- Сравнивайте строки, а не команды. Полезный вопрос в том, где ваша команда сильнее или слабее, а не как она сравнивается с другой.
- Спрашивайте, что изменилось. Рост за квартал должен подкрепляться решением, привычкой или результатом, который вы можете назвать. Рост без свидетельств говорит, что отметка была оптимистичной.
- Остановитесь на достаточно хорошем. Команда может разумно оставаться на уровне 3 в некоторых строках годами.