Метрики выполнения запросов на обслуживание
Измеряйте, сколько времени рутинные запросы занимают с точки зрения пользователя, какая часть этого времени есть ожидание, какие элементы каталога порождают спрос и какая часть работы автоматизирована, затем используйте картину, чтобы перепроектировать частые запросы, а не подгонять людей, которые их обрабатывают.
Обзор и мотивация
Запрос на обслуживание есть рутинный запрос пользователя на что-то, что услуга предназначена предоставлять: учётную запись, доступ к папке, ноутбук, лицензию на программу, часть информации. Он отличается от инцидента, который есть внеплановое нарушение услуги (см. тему 3.2, Объём и приоритет инцидентов), и от изменения, которое модифицирует услугу и требует нового суждения о риске (см. тему 4.3, Метрики управления изменениями). В ITIL 4 эта работа охвачена практикой управления запросами на обслуживание и обычно описывается как повторяемая модель запроса: нужная информация, согласования, шаги и ожидаемое время.
Запросы важны для метрик, потому что они суть предсказуемый спрос. Инцидент есть сюрприз; запрос на ноутбук для нового сотрудника приходит каждый месяц и следует тем же шагам. Эта предсказуемость делает запросы лучшим кандидатом для проектирования, стандартизации и автоматизации процессов. Это также означает, что задержки редко вызваны трудностью. Они вызваны очередями, согласованиями и передачами, так что полезный вопрос состоит в том, где запрос ждёт, а не в том, как быстро кто-либо печатает.
Единицей анализа служит элемент каталога: одна названная вещь, которую пользователь может запросить в каталоге услуг. Показатели по элементам гораздо полезнее единого смешанного числа, потому что у запроса на сброс пароля и запроса на сборку сервера разные часы, разные владельцы и разные разумные цели. Смешанное среднее прячет оба.
Взгляды Agile и ITIL встречаются здесь почти без трения. ITIL спрашивает, поставляет ли услуга согласованный результат в согласованное время. Практика потока в Agile спрашивает, сколько времени работа течёт от запроса до готовности, сколько сидит в очередях и сколько работы в процессе одновременно. Запрос есть рабочий элемент, движущийся по рабочему процессу, так что инструменты измерения потока, такие как время цикла и возраст рабочего элемента, применимы напрямую (см. тему 2.1, Показатели потока). Словарь различается. Арифметика та же.
Повторяются три термина. Время выполнения запроса (fulfillment time) есть прошедшее время с момента, когда пользователь подаёт запрос, до момента, когда пользователь подтверждает или система записывает, что вещь доставлена. Время работы над запросом (hands-on time) есть время, когда над запросом активно работает человек, а время ожидания есть всё остальное, включая согласования и ожидание пользователя. Разница между ними есть то, что модель запроса должна сокращать. Доля автоматизации есть часть запросов, выполненных без прикосновения человека после подачи.
Показатели времени требуют осторожности. Времена выполнения скошены: большинство запросов заканчивается быстро, а немногие занимают очень долго. Среднее тянется вслед за немногими, поэтому сообщайте медиану и высокий перцентиль, такой как 85-й или 95-й (см. тему 1.6, Статистическая грамотность для метрик услуг). Цели, согласованные с клиентами, такие как в соглашении об уровне услуг (SLA), следует формулировать так же: «85 % запросов на ноутбуки выполняются в пределах 5 рабочих дней» говорит больше, чем «в среднем 3 дня».
Наконец, предупреждение из психологии измерения. Когда команду оценивают по быстрому закрытию запросов, самый дешёвый способ улучшить число состоит в том, чтобы изменить, что считается закрытым, или приостановить часы. Закон Гудхарта применяется в полной мере (см. тему 1.2, Закон Гудхарта и психология метрик). Поэтому каждая метрика ниже спарена с ограждением, и ни одна не описывает отдельного оператора.
Ключевые принципы
- Измеряйте по элементам каталога. У каждого элемента своя модель запроса, владелец и разумная цель, поэтому смешанные числа вводят в заблуждение.
- Запускайте часы, когда пользователь просит, и останавливайте, когда у пользователя есть вещь. Внутренние вехи суть полезная диагностика, но не опыт клиента.
- Разделяйте время ожидания и время работы. Разрыв между ними показывает, где окупается перепроектирование, и оно редко лежит в самой работе.
- Сообщайте распределения, а не средние. Медиана и 95-й перцентиль описывают то, через что проходят пользователи.
- Относитесь к спросу как к сигналу. Объём по элементам показывает, что нужно пользователям, что запутанно и что заслуживает автоматизации или самообслуживания.
- Сначала автоматизируйте стабильное и частое. Доля автоматизации есть результат хорошего проектирования запросов, а не цель, за которой надо гнаться ради неё самой.
- Измеряйте команду и услугу, никогда человека. Запросы текут через системы, а вариация между операторами в основном отражает состав работы.
Определения метрик
| Метрика | Определение | Формула | Единица | Источник данных | Практика ITIL | Agile-аналог | Периодичность |
|---|---|---|---|---|---|---|---|
| Время выполнения запроса | Прошедшее время доставки запроса, показанное как медиана и 95-й перцентиль по элементу каталога | часы запускаются, когда пользователь подаёт запрос, и останавливаются, когда пользователь подтверждает доставку или доставка записана; запросы, отменённые пользователем, исключаются; время ожидания пользователя сообщается отдельно, а не убирается | рабочие дни или часы | История запросов инструмента ITSM | Управление запросами на обслуживание | Время цикла на доске команды (см. тему 2.2, Время выполнения, время цикла и эффективность потока) | Раз в неделю, тренд раз в месяц |
| Выполнение в пределах цели | Доля запросов, доставленных в пределах цели, согласованной для их элемента каталога | запросы, выполненные в пределах цели / запросы, выполненные в периоде; часы как выше, всё ещё открытые элементы исключаются и считаются вместо этого в возрасте бэклога | процент | История запросов инструмента ITSM; таблица целей по элементам каталога | Управление уровнями услуг | Ожидание по уровню услуги | Раз в месяц |
| Бэклог запросов и возраст | Число открытых запросов и возраст самых старых, по элементу каталога | открытые запросы на конец периода (число); возраст каждого открытого запроса = дата отчёта минус дата подачи; сообщайте число, медианный возраст и самый старый возраст | число и дни | Очередь открытых запросов инструмента ITSM | Управление запросами на обслуживание | Работа в процессе и стареющие рабочие элементы (см. тему 2.3, Работа в процессе и теория очередей) | Раз в неделю |
| Время ожидания согласования | Время, которое запрос проводит в ожидании согласования | часы запускаются, когда согласование запрошено, и останавливаются, когда оно дано или отклонено; запросы без шага согласования исключаются | часы | Журнал согласований инструмента ITSM | Управление запросами на обслуживание; управление изменениями | Время блокировки или колонка «ожидание» на доске | Раз в месяц |
| Объём запросов по элементу каталога | Число запросов, поданных на каждый элемент, с его долей от всех запросов | запросы, поданные на элемент за период; запросы, повторно поданные как дубликаты, если выявлены, исключаются; сообщайте число и долю от итога | число и процент | Записи запросов инструмента ITSM | Управление каталогом услуг | Анализ спроса для формирования бэклога | Раз в месяц |
| Доля автоматизации | Часть запросов, выполненных без ручного шага после подачи | запросы, выполненные от начала до конца автоматизацией / запросы, выполненные в периоде; запрос, которого коснулся человек на любом шаге выполнения, считается ручным; согласования человеком не считаются ручными шагами выполнения, если их требует политика | процент | Записи выполнения инструмента ITSM и журналы платформы автоматизации | Управление запросами на обслуживание; автоматизация в цепочке создания ценности услуг | Автоматизация в определении готовности | Раз в месяц |
| Доля повторного открытия запросов | Доля выполненных запросов, которые пользователь открывает заново или поднимает снова, потому что результат был неверным или неполным | запросы, открытые заново или поднятые снова по тому же элементу тем же пользователем в течение 7 дней после выполнения / запросы, выполненные в периоде; окно в 7 дней есть пример, который команда записывает | процент | История запросов инструмента ITSM | Управление запросами на обслуживание | Доля переделок; ушедшие дефекты | Раз в месяц |
Время выполнения считает рабочее время только если команда согласовала календарь и записала его; иначе используйте прошедшие часы и скажите об этом. Показатель бэклога намеренно несёт три числа, потому что один счёт ничего не говорит об ожидании. Определение доли автоматизации оставляет согласования людьми вне «ручного» итога, потому что многие согласования суть решение политики, а не цена выполнения; время ожидания согласования измеряется отдельно, чтобы задержка оставалась видимой.
Рекомендации
Определите часы и единицу
1. Измеряйте по элементам каталога и публикуйте список элементов. Начните с десяти главных элементов по объёму, которые обычно покрывают большую долю запросов, и добавляйте элементы по мере того, как позволяют данные. Дайте каждому элементу владельца, заявленную цель и однострочное определение «доставлено». Список элементов есть знаменатель для всего остального, поэтому держите его в реестре метрик (см. тему 1.4, Управление метриками и ответственность за них).
2. Запишите начало и конец часов для каждого элемента. Для большинства элементов часы запускаются при подаче и останавливаются, когда пользователь может использовать то, о чём просил, а не когда заявка закрыта. Ноутбук доставлен, когда он в руках у пользователя, а не когда заказан курьер.
3. Решите один раз, как обращаться с ожиданием пользователя. Некоторые запросы застревают, потому что пользователь не ответил на вопрос. Приостановка часов для этого разумна, но это и самый лёгкий рычаг для злоупотребления. Записывайте паузу как отдельное состояние с причиной, сообщайте приостановленное время отдельным числом и пересматривайте долю пауз по элементу (см. тему 1.5, Источники данных и инструментирование).
Сообщайте то, что переживают пользователи
4. Показывайте медиану и 95-й перцентиль со счётом. Поместите оба на один график по элементу, с числом запросов за каждой точкой. Медиана в два дня при 95-м перцентиле в двадцать говорит, что большинство пользователей обслуживается хорошо, а хвост требует исследования, чего среднее в четыре дня не покажет. Когда счёт мал, скажите об этом и показывайте отдельные запросы вместо перцентиля.
5. Делайте возраст открытых запросов видимым. Время выполнения известно только после завершения запроса, поэтому оно запаздывает. Список самых старых открытых запросов по элементам, отсортированный по возрасту, говорит команде, куда смотреть сегодня. В терминах потока это возраст рабочего элемента против обычного времени цикла элемента, и это самый действенный вид, который может иметь очередь запросов.
6. Разделите прошедшее время на время работы, согласования и ожидания пользователя. Возьмите выборку выполненных запросов по одному элементу и разбейте каждый на время в каждом состоянии. Большинство команд находит, что активная работа составляет малую долю прошедшего времени. Эта находка переводит разговор об улучшении с «работать быстрее» на «убрать очередь между шагами», а это основная идея исследования очередей и потока (см. тему 2.3, Работа в процессе и теория очередей).
Используйте спрос, чтобы формировать услугу
7. Читайте объём по элементам как сообщение от пользователей. Растущий объём по одному элементу может означать растущую потребность, запутанный продукт или сбой в другом месте, например сломанный процесс, отправляющий людей снова просить. Элемент с очень малым объёмом может быть кандидатом на вывод из каталога. Сравнивайте объём с данными о внедрении (см. тему 6.3, Метрики внедрения услуг и каталога).
8. Ранжируйте кандидатов на автоматизацию по объёму, стабильности и времени работы. Лучшие первые кандидаты: большой объём, редкие вариации и заметное время работы. Начните с элемента, шаги которого уже каждый раз одинаковы, такого как доступ к стандартной группе, и автоматизируйте шаги, прежде чем трогать исключения. Отслеживайте долю автоматизации по элементу, чтобы прогресс был виден, и отправляйте вопросы самообслуживания и отвода обращений в их собственную тему (см. тему 3.7, Метрики самообслуживания и автоматизации).
9. Перепроектируйте согласования, прежде чем добавлять людей. Ожидание согласования часто доминирует во времени. Для каждого согласования спросите, требует ли его политика, подошёл бы заранее разрешённый стандартный запрос и может ли согласующим быть роль с заместителем, а не один человек. Предварительное разрешение низкорисковых, хорошо понятных запросов повторяет идею стандартных изменений в управлении изменениями и убирает очереди, не убирая контроль.
Сохраняйте честность чисел
10. Каждый раз парьте скорость с качеством. Сообщайте время выполнения рядом с долей повторного открытия и сигналом удовлетворённости пользователей для того же элемента (см. тему 6.1, Метрики удовлетворённости клиентов). Более быстрый запрос, возвращающийся открытым заново, медленнее, чем выглядит. Если скорость улучшается, а доля повторного открытия растёт вместе с ней, считайте выигрыш скорости недоказанным.
11. Держите запросы, инциденты и изменения раздельно в данных. Смешение искажает все три. Сброс пароля, на самом деле являющийся симптомом неисправной службы входа, есть инцидент, а запрос на изменение того, как работает услуга, есть изменение. Классифицируйте при приёме по короткому правилу, ежеквартально проверяйте выборку неверно классифицированных элементов и сравнивайте объёмы запросов и инцидентов рядом (см. тему 3.1, Метрики службы поддержки).
12. Пересматривайте таблицу элементов с командой, делающей работу. Собирайтесь ежемесячно на тридцать минут вокруг таблицы по элементам: объём, медиана и 95-й перцентиль, самый старый открытый запрос, доля автоматизации, доля повторного открытия. Выберите один элемент и одно изменение, чтобы попробовать, и посмотрите на ту же таблицу в следующем месяце, чтобы увидеть, что произошло.
Векторы манипуляции и ограждения
| Метрика | Как её искажают | Парная метрика или практика-ограждение |
|---|---|---|
| Время выполнения запроса | Приостанавливать часы для «ожидания пользователя», является ли пользователь причиной или нет; закрывать запросы до доставки и открывать их как новые; делить один запрос на несколько малых | Доля приостановленного времени по элементу с выборочным аудитом причин пауз; доля повторного открытия; подтверждение доставки пользователем перед закрытием |
| Выполнение в пределах цели | Переопределять цель на более лёгкую; считать только запросы, которые заканчиваются, и игнорировать старые открытые; выбирать быстрые элементы для набора целей | Возраст бэклога для открытых запросов; изменения целей записываются в реестр метрик с причиной; набор целей покрывает все элементы по объёму |
| Бэклог запросов и возраст | Закрывать старые запросы как «нет ответа» или «устарело»; переносить запросы в другую очередь или категорию, чтобы они покинули считаемую очередь | Число запросов, закрытых без доставки, по причинам; переводы по категориям и очередям пересматриваются на ежемесячной встрече |
| Время ожидания согласования | Согласующие утверждают, не читая, чтобы держать своё время низким; запросившие подгоняют согласующих вне системы, так что записанное ожидание коротко | Выборочная проверка утверждённых запросов на соответствие политике; доля повторного открытия и исключения безопасности для утверждённых элементов; число шагов согласования по элементу |
| Объём запросов по элементу каталога | Сокращать объём, делая каталог труднее для поиска или отбивая охоту просить; переклассифицировать запросы как инциденты или «общие вопросы» | Удовлетворённость каталогом; доля обращений, классифицированных как «другое»; данные о внедрении услуги (см. тему 6.3, Метрики внедрения услуг и каталога) |
| Доля автоматизации | Автоматизировать тривиальные элементы, чтобы поднять процент; считать автоматизированным скриптовый запрос, который человек всё равно проверяет вручную; прятать ручные шаги в отдельной заявке | Доля, взвешенная по объёму запросов и по убранному времени работы; доля сбоев автоматизации и возврата к ручному; выборка «автоматизированных» запросов, прослеженных от начала до конца |
| Доля повторного открытия запросов | Отбивать охоту открывать заново, затрудняя это; говорить пользователям открыть новый запрос, что сбрасывает счётчик | Повторные запросы от того же пользователя по тому же элементу в окне; удовлетворённость пользователей по элементу; повторное открытие разрешено из уведомления |
Здоровое чтение выглядит так. Медиана и 95-й перцентиль падают вместе, либо 95-й перцентиль падает, пока медиана держится. Самый старый открытый запрос не намного старше 95-го перцентиля выполненных. Доля повторного открытия и удовлетворённость остаются ровными или улучшаются, пока скорость улучшается. Доля автоматизации растёт на элементах, важных по объёму, а сам объём меняется по причинам, которые команда может объяснить. Если одно число резко улучшается, а его ограждение дрейфует в другую сторону, пойдите и посмотрите на запросы за ним.
Компромиссы: плюсы и минусы
| Выбор | Преимущества | Недостатки |
|---|---|---|
| Измерение по элементам | Цели подходят работе; показывает, где окупается перепроектирование | Больше данных для поддержки; у малых элементов мало точек данных |
| Медиана и 95-й перцентиль вместо среднего | Описывает то, через что проходят пользователи; устойчива к выбросам | Труднее объяснить руководителям, привыкшим к одному числу; неустойчива для элементов малого объёма |
| Приостановка часов, когда ждут пользователя | Честно к команде, когда задержку вызывает пользователь | Легко злоупотребить; прячет эффект неясных форм и плохой коммуникации |
| Подсчёт доли автоматизации | Делает прогресс автоматизации видимым и связывает его с ценой | Награждает лёгкую автоматизацию; ничего не говорит о качестве без пары с долей сбоев |
| Измерение от подачи пользователем до подтверждения пользователем | Соответствует опыту клиента | Зависит от подтверждения пользователем, которого часто нет; нужно правило по умолчанию |
| Строгое отделение запросов от инцидентов | Чище данные и лучше цели | Требует дисциплины приёма и споров о крайних случаях |
Центральный компромисс лежит между чистым числом и честным. Строгие часы, никогда не приостанавливающиеся, просты и трудно подтасовываются, но наказывают команду, когда пользователь медлителен. Гибкие часы честнее, но требуют аудита. Большинству команд стоит начать строго, добавить одно явное приостановленное состояние с причиной и открыто сообщать приостановленную долю.
Вопросы для обсуждения в команде
1. Какие три элемента каталога вызывают у наших пользователей больше всего ожидания и откуда мы это знаем? Принесите таблицу по элементам с объёмом, медианой и 95-м перцентилем времени выполнения. Попросите группу выбрать элементы по суммарному ожиданию (объём на типичное ожидание), а не по тому, насколько они раздражают. Сравните ответ с первым инстинктом людей. Ведущему стоит отметить, где данные и инстинкт расходятся.
2. Где запускаются и останавливаются наши часы и согласился бы с этим пользователь? Выберите один частый элемент и пройдите его путь так, как его видит пользователь, от первого щелчка до момента, когда он может использовать результат. Отметьте, где статус заявки говорит «сделано» и где сказал бы «сделано» пользователь. Любой разрыв между ними есть невидимое ожидание. Договоритесь об одном изменении события остановки и запишите его в реестр метрик.
3. Какая часть нашего прошедшего времени приходится на работу людей и какая на ожидание? Выберите десять выполненных запросов по одному элементу и разбейте каждый на время работы, согласования и ожидания пользователя. Покажите результат столбчатой диаграммой с накоплением. Спросите, что должно быть верно, чтобы ожидание уменьшилось вдвое. Этот вопрос обычно переводит комнату от «нам нужно больше людей» к «нам нужно меньше передач».
4. Какие согласования можно заменить заранее согласованным правилом? Перечислите согласования для главных элементов и причину политики для каждого. Там, где никто не помнит последний отказ, согласование может быть ритуалом.
5. Если бы мы автоматизировали следующий элемент каталога, выросло бы число по правильной причине? Обсудите, как доля автоматизации может расти за счёт лёгких или малообъёмных элементов, пока пользователи не видят разницы. Спросите, что команда измеряла бы, чтобы подтвердить, что автоматизация помогла: убранное время работы, доля сбоев, доля повторного открытия и удовлетворённость. Решите, какой элемент автоматизировать следующим, по объёму и времени работы, а не по лёгкости.
6. Что бы мы делали, если бы число на этой странице ухудшилось, и кого бы винили? Проведите мысленный эксперимент открыто. Спросите, что команду соблазняло бы изменить в данных раньше, чем в услуге. Договоритесь, что первая реакция на ухудшающееся число состоит в том, чтобы посмотреть на запросы за ним.
Четыре точки зрения
Продуктовые команды и команды поставки
Продуктовые команды порождают запросы о собственных услугах: доступ к средам, новые конвейеры, тестовые данные, лицензионные ключи. Долгие времена выполнения для них проявляются как простаивающая работа в собственном потоке команды, поэтому показатель принадлежит их доске как заблокированное состояние. Командам, владеющим услугой, следует публиковать собственные элементы запросов и цели и относиться к повторяющимся запросам как к кандидатам в бэклог (см. тему 2.6, Метрики бэклога и его уточнения). Где запрос на самом деле есть недостающая возможность платформы, повторяющийся спрос и есть довод в пользу её построения.
Команды услуг и эксплуатации
Для людей, выполняющих запросы, таблица по элементам есть карта того, куда уходит усилие. Они знают, какие шаги ручные, какие согласования стопорятся и какие формы дают расплывчатый ввод. Им следует владеть моделями запросов, бэклогом автоматизации и ежемесячным пересмотром и быть первой аудиторией для данных. Числа описывают очередь и процесс, поэтому скажите явно, что никто не ранжируется и что вариация между людьми в основном отражает состав запросов, которые они берут.
Руководство и управление
Руководителям нужен короткий вид: медиана и 95-й перцентиль для главных элементов, доля выполненных в пределах цели, самые старые открытые запросы и тренд доли автоматизации и стоимости на запрос (см. тему 7.5, Стоимость услуг и удельная экономика). Задача управления в том, чтобы спрашивать, что изменилось, а не кто медлителен. Руководители также утверждают сторону политики согласований, так что в их руках рычаг, больше всего сокращающий ожидание.
Клиенты и пользователи
Пользователям важны три вещи: как долго, насколько предсказуемо и сколько усилий. Внутренние состояния их редко заботят. Покажите им простую цель по элементу («ноутбуки за пять рабочих дней»), скажите, где их запрос, и попросите подтвердить доставку. Собирайте сигнал удовлетворённости одним вопросом при закрытии и читайте комментарии.
На практике: пример из управления услугами
ИТ-отдел регионального университета (вымышленная организация) держит службу поддержки и небольшую платформенную команду. Числа ниже иллюстративны и не относятся ни к какой реальной организации.
На ежемесячном пересмотре команда смотрит на таблицу по элементам. По всем запросам среднее время выполнения составляет 3,1 рабочего дня, что выглядит приемлемо и почти не менялось год. По элементам картина другая. У «Доступа к общему диску» медиана 0,4 дня и 95-й перцентиль 2 дня. У «Лицензии на программу для отдела» медиана 2 дня и 95-й перцентиль 11 дней. У «Ноутбука для нового сотрудника» медиана 6 дней и 95-й перцентиль 15 дней. Три главных элемента по объёму: доступ к общему диску, запросы лицензий и ноутбуки для новых сотрудников, с иллюстративными долями 32, 21 и 9 % от всех запросов.
Команда берёт выборку из десяти запросов на ноутбуки и разделяет время. Иллюстративный результат: около 0,5 дня работы, 2,5 дня ожидания согласования линейным руководителем, 1,5 дня ожидания подтверждения запасов, а остальное в очереди курьера. Ожидание согласования составляет самую большую часть.
Решение следует из данных. Команда предлагает вместе с финансовым владельцем и владельцем безопасности, чтобы ноутбуки из стандартного каталога разрешались заранее, когда роль нового сотрудника подтверждена отделом кадров, а руководителя уведомляли, а не спрашивали. Они также связывают проверку запасов с системой инвентаризации. Они задают эксперимент на один квартал и договариваются, что будет успехом: 95-й перцентиль для ноутбуков падает, а доля повторного открытия и оценка удовлетворённости остаются на прежнем уровне.
Риск манипуляции появляется на втором месяце. Медиана для лицензий резко падает, с 2 дней до менее 1. Пересмотр замечает, что доля приостановленного времени «ожидание пользователя» по элементу подскочила с иллюстративных 5 % до 40 %, а доля повторного открытия выросла. Выборка показывает, что операторы приостанавливали запросы общим сообщением, как только лицензия требовала любой проверки, что останавливало часы. Команда не винит операторов. Она видит, что цель сделала паузу привлекательной, а поле причины паузы было свободным текстом. Они заменяют причину паузы коротким списком, требуют конкретного вопроса пользователю и добавляют долю приостановленного времени как постоянный столбец рядом с медианой. Медиана лицензий возвращается близко к прежнему уровню, доля повторного открытия падает, а команда использует сэкономленное время обсуждения, чтобы перепроектировать форму лицензии, порождавшую неясные запросы.
После квартала (иллюстративно) 95-й перцентиль для ноутбуков падает с 15 до 9 дней, а доля автоматизации для доступа к общему диску достигает 70 %. Команда записывает оба изменения и выбирает форму лицензии следующим экспериментом.
Agile, ИИ, автоматизация и аналитика
Agile
Относитесь к частым запросам как к малым продуктам, которые команда непрерывно улучшает вместе с людьми, которые ими пользуются. Осторожность в том, что цель по времени выполнения может привести к раннему закрытию запросов или их делению; поэтому парьте её с долей повторного открытия запросов.
ИИ
ИИ может составлять ответы, заполнять формы и маршрутизировать запросы и может выполнять часть запросов без участия человека. Парьте долю автоматизации с долей повторного открытия запросов и с долей обработанных ИИ запросов, которым потом понадобился человек. Осторожность в том, что ИИ, неверно прочитавший запрос, может создать неверный доступ или заказ; поэтому правила согласования по-прежнему применяются.
Автоматизация
Автоматизируйте согласования, предоставление и обновления статуса для стандартных запросов и измеряйте автоматизацию по сбоям и ручным переделкам. Показывайте время ожидания согласования отдельно, поскольку оно часто есть самое долгое ожидание. Осторожность в том, что автоматизация без ясного владельца оставляет сбойные запросы в очереди, за которой никто не следит.
Аналитика
Показывайте время выполнения как распределение по элементам каталога и включайте самый старый открытый запрос. Решение, которое это информирует, состоит в том, какой запрос перепроектировать первым. Осторожность в том, что смешение простых и сложных элементов в одном среднем прячет оба.
Отраслевой взгляд
Стартап. У стартапа мало видов запросов и нет формального каталога, а одни и те же люди обрабатывают запросы и строят продукт. Измеряйте три-четыре запроса, блокирующих новичков, такие как учётные записи и оборудование, и отслеживайте самый старый открытый запрос. Автоматизируйте ввод в работу рано, потому что каждый наём его повторяет.
Малый бизнес. Малый бизнес часто опирается на одного ИТ-специалиста или внешнего поставщика. Используйте простую общую доску с колонкой на каждое состояние и отслеживайте возраст запросов и объём по типам. Просите у поставщика ежемесячный объём по элементам и самый старый открытый запрос.
Крупная компания. У крупной компании сотни элементов каталога, много групп выполнения и многослойные согласования. Сосредоточьтесь на главных элементах по объёму и на самых долго ждущих по суммарному ожиданию. Стандартизируйте определение часов по группам выполнения, прежде чем сравнивать их, и сообщайте межгрупповые передачи отдельно (см. тему 9.3, Метрики сотрудничества и передачи работы). Времена выполнения поставщиков принадлежат тому же виду, измеряемые от запроса клиента, а не от получения поставщиком.
Государство и публичный сектор. Государственные органы добавляют обязательные согласования, правила закупок и обязанности по записям, поэтому часть времени ожидания есть политика и должна быть помечена как таковая, а не засчитана как задержка, которую надо убрать. Публикуйте цели по элементам простым языком там, где обязательства по услугам публичны. Сообщайте так, чтобы регулятор или надзорный орган мог воспроизвести, с записанными определениями.
Бизнес-обоснование: мотивы, ROI и TCO
Запросы составляют большую и повторяющуюся долю работы, доходящей до службы поддержки, так что даже скромное перепроектирование имеет широкий эффект. Основные мотивы: более короткое и предсказуемое ожидание для пользователей, меньшее усилие обработки на запрос, меньше повторных обращений и ёмкость, высвобожденная для работы над проблемами и улучшениями.
Затратная сторона в основном разовая и скромная. Определение элементов каталога, согласование часов и обеспечение записи инструментом нужных состояний занимают несколько дней работы на группу, плюс небольшое постоянное усилие, чтобы конвейер оставался верным (см. тему 1.5, Источники данных и инструментирование). У автоматизации есть собственная цена построения и поддержки, включающая мониторинг автоматизаций, обработку сбоев и обновление при смене целевых систем. Считайте это в совокупной стоимости владения сверх лицензии или времени построения.
Отдачу следует оценивать по своим данным, а не по общему эталону. Для одного элемента умножьте месячный объём на сэкономленное время работы и на полную стоимость времени, затем вычтите цену построения и эксплуатации изменения. Добавьте ценность убранного для пользователей времени ожидания методом, который можете защитить, и покажите её отдельно, потому что это оценка другого рода. Ни одна цифра в этой теме не есть эталон, а числа примеров иллюстративны. Свяжите бизнес-обоснование с удельной стоимостью запроса там, где есть финансовые данные (см. тему 7.7, Возврат инвестиций и бизнес-обоснование).
Антипаттерны и ловушки
- Одно смешанное среднее для всех запросов. Оно прячет и быстрые победы, и длинный хвост. Сообщайте по элементам, с медианой и 95-м перцентилем.
- Закрыть заявку и назвать это доставкой. У пользователя всё ещё может ничего не быть. Определяйте доставку со стороны пользователя и просите подтверждения.
- Свободные состояния пауз. Статус «ожидание» без причины позволяет остановить часы по любому поводу. Используйте короткий список причин и сообщайте приостановленную долю.
- Подсчёт автоматизации по числу элементов. Десять автоматизированных редких элементов могут поднять процент, никому не помогая. Взвешивайте по объёму и времени работы.
- Ранжирование операторов по закрытым запросам. Это награждает выбор лёгких заявок и наказывает тех, кто берёт трудные. Сообщайте только на уровне команды и элемента.
- Сокрытие спроса, чтобы выглядеть эффективно. Затруднение пользования каталогом снижает объём и повышает раздражение. Парьте объём с данными об удовлетворённости и внедрении.
- Отношение к согласованиям как к неприкосновенным. Согласования часто есть самая большая задержка и редко пересматриваются. Спросите, что защищает каждое и может ли правило сделать эту работу.
- Смешение запросов с инцидентами. Это искажает оба набора чисел. Классифицируйте при приёме и выборочно проверяйте классификацию.
Модель зрелости
| Измерение | Инициирование | Развитие | Стандартизация | Управление | Оркестрация |
|---|---|---|---|---|---|
| Определения и часы | Запросы считаются как заявки; конец часов есть то, что значит «закрыто» | Некоторые команды определяют начало и конец по элементам; определения различаются | Одно письменное определение часов на элемент каталога, общее для команд | Определения пересматриваются по графику, изменения записываются с причинами | Определения следуют взгляду клиента через поставщиков и пересматриваются, когда перестают информировать решения |
| Данные и отчётность | Счёты вытягиваются вручную из инструмента | Отчёты по некоторым элементам из инструмента ITSM; средние времена | Медиана и 95-й перцентиль по элементам из одного источника данных | Тренды, возраст бэклога и доля приостановленного времени пересматриваются с их ограждениями | Данные о выполнении от внутренних команд и поставщиков объединены и связаны с результатами для пользователей |
| Спрос и автоматизация | Запросы обрабатываются по одному; нет взгляда на повторяющийся спрос | Главные элементы выявлены неформально; несколько скриптов | Модели запросов документированы для главных элементов; бэклог автоматизации ранжирован по объёму и времени работы | Доля автоматизации и доля сбоев отслеживаются; согласования перепроектированы по свидетельствам | Спрос, самообслуживание и автоматизация планируются вместе по организации и непрерывно адаптируются |
| Использование в улучшении | Числа сообщаются наверх, но не используются | Случайные исправления после жалоб | Ежемесячный пересмотр командой, делающей работу | Финансируемые улучшения привязаны к результатам по элементам | Идеи улучшений приходят от команд, пользователей и поставщиков, а результаты возвращаются в проект каталога |
Контрольный список
- У каждого элемента каталога в области есть владелец, однострочное определение «доставлено» и заявленная цель.
- События начала и конца часов выполнения записаны для каждого элемента.
- Ожидание пользователя есть отдельное состояние с коротким списком причин, а приостановленное время сообщается.
- Отчёты показывают медиану и 95-й перцентиль по элементу с числом запросов за каждой.
- Самые старые открытые запросы видны команде каждую неделю.
- Время работы, согласования и ожидания выбрано выборкой для главных элементов.
- Объём по элементам пересматривается ежемесячно и сравнивается с данными о внедрении или удовлетворённости.
- Доля автоматизации взвешена по объёму и спарена с долями сбоев и возврата к ручному.
- Каждый показатель скорости спарен с долей повторного открытия и сигналом удовлетворённости пользователей.
- Запросы, инциденты и изменения классифицируются при приёме, а классификация проверяется выборкой.
- Ни один отчёт не ранжирует отдельных операторов.
Промпты для ИИ
Составьте черновик модели запроса и определения часов для одного элемента каталога.
I am defining the measurement for this catalog item: [catalog item name]. The
steps today are [list steps and who does each], the approvals are [list
approvals], and our tool is [ITSM tool]. Draft a request model with the
information required, the start and stop events of the fulfillment clock, the
states in which the clock may pause and the allowed reasons, and a list of
timestamps I need the tool to record. Do not invent benchmark values or tool
features. List your assumptions and the questions I should answer to finish the
definition.
Разбейте прошедшее время на время работы и ожидания.
Here is a sample of [number] fulfilled requests for [catalog item] with state
change times: [paste anonymized state history, no names]. Compute, for each
request and for the sample, the hands-on time, approval wait, and waiting-for-user
time, and show the median and the range. Point out which state holds the most
time and what questions I should ask the team about it. Do not infer causes
without evidence, and do not compare individual people. List your assumptions.
Проранжируйте кандидатов на автоматизацию.
Here is a table of catalog items with monthly volume, median hands-on time,
variation in steps, and the systems each touches: [paste table]. Suggest a way
to rank automation candidates using volume, stability, and hands-on time, and
explain the ranking for the top [number] items. Flag items where automation could
create security or quality risk, and list what I should verify with [control
owner role] first. Do not invent savings figures or benchmark values. List your
assumptions.
Проверьте панель выполнения на риск манипуляции.
This is our request fulfillment dashboard: [describe metrics, definitions, and
targets]. For each metric, list how it could be gamed or misread, the
observable sign in the data, and a paired guardrail metric or practice. Check
that nothing ranks individuals, and suggest wording changes that reduce
pressure on the team. Do not invent thresholds; ask me for any you need. List
your assumptions.
Навыки ИИ
- Service Management Metrics skill: используйте, чтобы найти определение, вектор манипуляции и ограждение для метрики запросов и соседние темы, которые с ней парятся.
- Service Management Metrics maintainer skill: используйте, чтобы проверить, что правки этой темы сохраняют шаблон, часы и пары ограждений нетронутыми.
Главные выводы
- Измеряйте выполнение по элементам каталога, от подачи пользователем до подтверждения пользователем, и сообщайте медиану и высокий перцентиль.
- Большая часть прошедшего времени есть ожидание, поэтому разделите время работы, согласования и ожидания пользователя, прежде чем решать, что исправлять.
- Читайте объём по элементам как сообщение от пользователей и автоматизируйте частые и стабильные элементы первыми.
- Парьте каждое число скорости с долей повторного открытия и сигналом удовлетворённости и открыто сообщайте приостановленное время.
- Описывайте очередь и процесс, никогда человека.
Источники и дополнительное чтение
- AXELOS, ITIL Foundation: ITIL 4 Edition, TSO (The Stationery Office), 2019.
- AXELOS, ITIL 4 Practice Guide: Service Request Management, TSO (The Stationery Office), 2020.
- ISO/IEC 20000-1, Information technology: Service management: Part 1: Service management system requirements, International Organization for Standardization.
- Anderson, D. J., Kanban: Successful Evolutionary Change for Your Technology Business, Blue Hole Press, 2010.
- Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Reinertsen, D. G., The Principles of Product Development Flow: Second Generation Lean Product Development, Celeritas Publishing, 2009.
- Little, J. D. C., "A Proof for the Queuing Formula: L = λW," Operations Research, 9(3), 1961.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997.
- Wikipedia, ITIL.
- Wikipedia, Автоматизация процессов.
- Wikipedia, Каталог услуг.
- Wikipedia, Перцентиль.
- Wikipedia, Соглашение об уровне услуг.
- Wikipedia, Закон Гудхарта.