Введение в часть 1: Основы измерения
Измерение помогает команде, которая создаёт услуги и обеспечивает их работу, только тогда, когда оно выбрано с целью, закреплено за владельцем, опирается на надёжные данные, читается с осторожностью и не искажает работу, которую описывает.
Команды, которые практикуют непрерывную поставку, и команды, которые практикуют управление ИТ-услугами (ITSM), производят ровный поток чисел: закрытые заявки, завершённые пользовательские истории, выполненные развёртывания, устранённые инциденты. Иметь числа легко. Иметь числа, которые помогают людям что-то решить, труднее, и именно в этом разрыве буксует большинство программ метрик. Эта часть даёт общую основу, на которую опирается каждая последующая часть, ещё до того, как определена хоть одна отдельная метрика. Она добавляет и линзу, которую книга несёт через весь текст: как ITIL 5, ИИ, автоматизация и аналитика меняют то, что измеряет организация услуг.
Основа последовательно охватывает семь вопросов. Зачем вообще измерять и во что обходится отказ от измерений или измерение не того? Как показатель превращается в цель и перестаёт говорить правду? Что вообще стоит измерять? Кто определяет, ведёт и выводит из обращения каждую метрику? Откуда берутся данные и насколько им можно доверять? Как читать числа, если данные по заявкам и потоку скошены и часто скудны? Одна тема показывает, как устоявшиеся рамки помогают упорядочить ответы, а заключительная тема спрашивает, что ITIL 5, в том виде, как его описывает владелец, значит для измерения, и отделяет то, что можно проверить, от того, что нельзя.
Если вы новичок в этой книге, прочитайте эту часть первой и возвращайтесь к ней всякий раз, когда какая-то метрика в более поздних частях начнёт вести себя странно. Большинство сбоев метрик в последующих частях восходит к одной из идей, представленных здесь. Метрики в этой книге описывают команды, услуги и системы. Они никогда не используются для ранжирования людей.
Темы этой части
- 1.1 Зачем измерять управление услугами: зачем командам, создающим и эксплуатирующим услуги, нужны числа, что вносят в измерение Agile и ITIL и во что обходится отказ от измерений или измерение не того.
- 1.2 Закон Гудхарта и психология метрик: ограждение, лежащее в основе всех остальных тем: как показатель превращается в цель, как возникает манипуляция данными по заявкам и поставке и какие привычки её предотвращают.
- 1.3 Результаты важнее выпуска: что выбрать для измерения: ценность, результаты, выпуск и активность, опережающие и запаздывающие индикаторы и совместное создание ценности в ITIL как проверка хорошей метрики.
- 1.4 Управление метриками и ответственность за них: владельцы метрик, определения, периодичность пересмотра, вывод из обращения и кто что может видеть.
- 1.5 Источники данных и инструментирование: инструменты ITSM, трекеры задач, системы контроля версий, конвейеры непрерывной интеграции и поставки, мониторинг, база данных управления конфигурациями (CMDB) и опросы как источники, с вниманием к качеству данных, меткам времени и моделям статусов.
- 1.6 Статистическая грамотность для метрик услуг: перцентили вместо средних, скошенные распределения, малые выборки, контрольные карты и честная неопределённость для данных по заявкам и потоку.
- 1.7 Рамки измерения: Goal-Question-Metric, цели и ключевые результаты (OKR), сбалансированная система показателей, критические факторы успеха и ключевые показатели эффективности и то, как они сочетаются с практиками ITIL.
- 1.8 Измерение ITIL 5 и результаты для ценности: заявленный в ITIL 5 акцент на измеримой ценности, цифровых продуктах и средах с ИИ, как он проверен по собственным публикациям владельца, и основы (ответственность, результаты, надзор за ИИ), которые можно измерять уже сегодня.
Как эти темы связаны между собой
Темы образуют скорее петлю, чем лестницу. Тема 1.1 (см. тему 1.1, Зачем измерять управление услугами) задаёт цель, а тема 1.3 (см. тему 1.3, Результаты важнее выпуска: что выбрать для измерения) превращает эту цель в выбор того, что измерять. Метрика, выбранная за ориентацию на результат, всё равно нуждается в определении, владельце и дате пересмотра, а это работа темы 1.4 (см. тему 1.4, Управление метриками и ответственность за них). Рамки вроде Goal-Question-Metric, рассмотренные в теме 1.7 (см. тему 1.7, Рамки измерения), дают повторяемый путь от цели к небольшому набору показателей, поэтому они естественно сочетаются с темами 1.3 и 1.4.
Данные и статистика образуют вторую пару. Хорошо выбранная метрика так же хороша, как записи за ней, и тема 1.5 (см. тему 1.5, Источники данных и инструментирование) объясняет, как метки времени, модели статусов и настройка инструментов определяют, что может значить число. Тема 1.6 (см. тему 1.6, Статистическая грамотность для метрик услуг) затем рассказывает, как читать это число честно, с помощью перцентилей, контрольных карт и простых утверждений о неопределённости. Слабые данные губят хорошую статистику, а слабая статистика расточает хорошие данные, поэтому лучше читать обе темы вместе.
Тема 1.8 (см. тему 1.8, Измерение ITIL 5 и результаты для ценности) применяет ту же петлю к меняющейся рамке: она измеряет основы, нужные любой версии, и сохраняет пометки у непроверенных утверждений. Тема 1.2 (см. тему 1.2, Закон Гудхарта и психология метрик) стоит поперёк всех остальных как ограждение. Любую метрику, выбранную по теме 1.3, управляемую по теме 1.4 и взятую из источников темы 1.5, всё равно можно исказить, как только людей начинают судить по ней. Управление ограничивает, кто что видит и как используется метрика. Выбор, ориентированный на результат, делает манипуляцию менее выгодной. Парные показатели, введённые здесь и развиваемые по всей книге, позволяют одному числу проверять другое. Поэтому каждая метрика в последующих частях несёт вектор манипуляции и ограждение, а эта часть объясняет, почему.