Метрики службы поддержки
Измеряйте службу поддержки тем, насколько хорошо она помогает людям вернуться к работе и чему учит остальную организацию, потому что счёты звонков и минут на телефоне награждают скорость и объём за счёт обоих.
Обзор и мотивация
Для большинства пользователей служба поддержки и есть услуга. Они редко встречают инженеров или видят конвейер; они встречают того, кто отвечает, когда что-то идёт не так. Служба технической поддержки (help desk) есть отдел или человек, дающий помощь и информацию, обычно о компьютерных проблемах. В употреблении управления ИТ-услугами (ITSM) служба поддержки (service desk) есть единая точка контакта между поставщиком и его пользователями, обрабатывающая и инциденты (внеплановые сбои или потенциальные сбои услуги), и запросы на обслуживание (рутинные запросы на что-то, что услуга обычно предоставляет). В ITIL 4 практика службы поддержки стоит рядом с управлением инцидентами и управлением запросами на обслуживание и описывается своей целью и результатами, а не фиксированным списком показателей. Поэтому эта тема предлагает практическое руководство, а не требование рамки.
Показатели, выросшие вокруг службы поддержки, происходят в основном из традиции колл-центров: сколько обращений поступило, как долго люди ждали, сколько бросило, сколько длилось каждое обращение и сколько решено с первой попытки. Эти показатели полезны и дёшевы, и они же самые лёгкие в книге, чтобы превратить в цели, вредящие услуге. Короткие звонки выглядят эффективно, пока тот же пользователь не перезвонит трижды. Низкий отказ от ожидания выглядит заботливо, пока операторы отвечают быстро и ничего не решают. Задача темы состоит в том, чтобы описать каждый показатель, указать его часы и сказать, что он награждает и что прячет.
Взгляд Agile добавляет вторую цель. Каждое обращение есть свидетельство о том, что пользователи находят запутанным, что ломается и чего они хотели бы от услуги. Команде Agile, часто выпускающей релизы, это свидетельство нужно быстро и на уровне услуги, а не заявки. Поэтому служба поддержки измеряется дважды: как операция, хорошо отвечающая людям, и как датчик, питающий бэклог. Объём есть мост между ними. Растущий счёт может означать рост, плохой релиз, отсутствующую статью или новый канал, и одна метрика не может сказать, что именно (о том, как читать счёты по категориям и приоритетам, см. тему 3.2, Объём и приоритет инцидентов).
Ключевые термины: решение с первого звонка есть доля обращений, решённых при первом контакте; автоматический распределитель вызовов направляет входящие звонки доступному персоналу; соглашение об уровне услуг (SLA) есть обязательство между поставщиком и клиентом; перцентиль есть значение, ниже которого падает заданная доля наблюдений, так что 85-й перцентиль времени обработки есть длительность, в пределах которой заканчивается 85 % обращений; а удовлетворённость клиентов (см. тему 6.1, Метрики удовлетворённости клиентов) есть то, насколько хорошо услуга отвечает ожиданиям пользователей.
Термины «обращение» и «заявка» не одно и то же. Обращение есть одна попытка человека связаться со службой поддержки через канал, такой как телефон, чат, электронная почта, портал, личный визит или мессенджер. Заявка (также называемая записью) есть то, что инструмент ITSM создаёт для отслеживания работы. Одна заявка может включать много обращений, а некоторые обращения, такие как сброс пароля, обработанный на месте, могут создавать заявку только для записи. Смешение этих двух есть самый частый источник путаницы в отчётности службы поддержки, поэтому определения ниже считают их отдельно.
Ключевые принципы
- Считайте обращения и заявки отдельно и определите оба. Обращение есть попытка связаться со службой поддержки; заявка есть запись о работе. Отчёты, смешивающие их, нельзя свести.
- Сообщайте времена как распределения. Показывайте медиану и высокий перцентиль, такой как 85-й или 95-й, никогда одно среднее, потому что несколько очень долгих или очень коротких обращений искажают среднее.
- Парьте каждый показатель скорости с показателем результата. Скорость ответа, отказ от ожидания и время обработки описывают усилие. Решение и повторное обращение описывают, помогли ли пользователю.
- Нормируйте объём на использование. Счёт, растущий потому, что вырастила база пользователей, есть другая история, чем растущий на пользователя.
- Измеряйте каналы и услуги, а не людей. Эти метрики описывают службу, очередь, услугу и канал. Они никогда не используются для ранжирования или дисциплинирования отдельных операторов.
- Относитесь к службе поддержки как к датчику. Каждая метрика должна вести к вопросу командам поставки о том, что исправить, задокументировать или автоматизировать выше по течению.
Определения метрик
В таблице перечислено семь показателей, которые большинство служб поддержки могут собрать со своей телефонной платформы и инструмента ITSM. Пороги и цели каждая служба задаёт и записывает сама; эта тема не даёт эталонных значений.
| Метрика | Определение | Формула | Единица | Источник данных | Практика ITIL | Agile-аналог | Периодичность |
|---|---|---|---|---|---|---|---|
| Объём обращений | Число обращений, полученных службой поддержки, по каналу и периоду | число обращений, созданных в периоде, по каналу; внутренние тестовые обращения, дубликаты автоответов электронной почты и исходящие звонки, сделанные службой, исключаются | число | Журнал телефонной или чат-платформы; записи обращений инструмента ITSM | Служба поддержки | Сигнал спроса при уточнении бэклога | Раз в неделю |
| Интенсивность обращений | Обращения относительно размера обслуживаемой совокупности, чтобы рост не принимали за проблему | обращения в периоде / активные пользователи или активные учётные записи в периоде, приведённые к 100 пользователям; число пользователей берётся за тот же период, а определение «активный» записано | обращений на 100 пользователей | Записи обращений и система учёта идентичностей или лицензий | Служба поддержки; управление уровнями услуг | Спрос с поправкой на использование на обзоре продукта | Раз в месяц |
| Время до ответа | Ожидание с момента, когда обращение входит в очередь, до момента, когда включается человек или автоматический ответ | часы запускаются, когда обращение поставлено в очередь, и останавливаются на первом ответе человека; брошенные обращения исключаются из этого показателя и считаются в отказе от ожидания; сообщайте медиану и 85-й перцентиль | секунды (телефон, чат); минуты или часы (электронная почта, портал) | Телефонная платформа; чат-платформа; метки времени инструмента ITSM | Служба поддержки | Рабочее соглашение об отзывчивости | Ежедневно в окнах пересмотра, еженедельно в тренде |
| Доля отказов от ожидания | Доля обращений, заканчивающихся пользователем до того, как кто-либо включился | обращения, завершённые пользователем до первого ответа человека / обращения, поставленные в очередь; обращения, завершённые в течение короткого льготного периода (указанного в определении, например пять секунд), исключаются как случайные | процент | Телефонная платформа; чат-платформа | Служба поддержки | Сигнал цены задержки на обзоре услуги | Раз в неделю |
| Время обработки | Время, которое служба тратит на обращение | часы запускаются, когда включается человек, и останавливаются, когда он заканчивает обращение, включая работу по документированию после обращения; ожидание пользователя включается, только если так сказано в определении; сообщайте медиану и 85-й перцентиль с разбивкой по типу обращения | минуты | Телефонная платформа; чат-платформа; журнал работ инструмента ITSM | Служба поддержки; управление инцидентами | Сигнал усилия при уточнении и планировании ёмкости | Раз в неделю |
| Доля решения с первого контакта | Доля обращений, решённых при первом контакте без последующего обращения по тому же вопросу | обращения, решённые во время обращения и не сопровождаемые повторным обращением по той же проблеме от того же пользователя в окне повторного обращения / подходящие обращения; звонки, где требуется только перенаправление, и звонки, которые служба не должна решать, исключаются | процент | Поля решения и связи инструмента ITSM; подтверждение пользователя, где собирается | Служба поддержки; управление инцидентами | Проверка определения готовности, решено при первом касании | Раз в месяц |
| Доля повторных обращений | Доля решённых обращений, за которыми следует другое обращение по тому же вопросу | обращения, за которыми в окне повторного обращения (например, семь дней, задаётся в определении) последовало другое обращение от того же пользователя по той же услуге или проблеме / обращения, решённые в более раннем периоде; обращения о новой проблеме исключаются | процент | Связь и история повторного открытия инструмента ITSM; записи обращений | Служба поддержки; управление инцидентами | Доля ушедших дефектов | Раз в месяц |
У решения с первого контакта более одного защитимого определения, поэтому определение есть часть метрики. Некоторые службы считают обращение решённым, когда оператор закрывает заявку во время звонка. Другие считают только когда пользователь не возвращается в течение окна. Второе труднее собрать и труднее подтасовать, и оно используется здесь. Укажите окно, укажите, что считается «тем же вопросом», и применяйте оба одинаково каждый период.
Рекомендации
Разделяйте обращения и заявки с самого начала
Дайте обращениям и заявкам собственные определения, идентификаторы и счёты. Обращение есть запись о попытке связаться со службой поддержки, а заявка есть запись о работе. Свяжите их в инструменте, чтобы повторное обращение по тому же вопросу было видно. Отчёты, смешивающие их, дают цифру объёма, которую никто не может свести с телефонной платформой.
Сообщайте объём по каналу, категории и нормированной интенсивности
Показывайте общий объём, объём по каналам, объём по категориям и интенсивность обращений на 100 пользователей. Одни итоги путают рост с неприятностями. Падение телефонного объёма может быть сдвигом в чат, а рост обращений через портал может быть намеренным успехом самообслуживания. Наносите ряд минимум за год, чтобы сезонность, такая как начала семестров и концы финансового года, была видна.
Используйте распределения для каждого показателя времени
Сообщайте медиану и высокий перцентиль для времени до ответа и времени обработки. Среднее скошенного распределения не описывает опыт почти никого. Медиана показывает типичное обращение, а 85-й или 95-й перцентиль показывает, насколько плох медленный хвост. Говорите, на скольких обращениях стоит цифра, и помечайте показание как ненадёжное, когда очередь обрабатывает лишь горстку обращений за период (см. тему 1.6, Статистическая грамотность для метрик услуг).
Относитесь к отказу от ожидания как к сигналу спроса и штата
Читайте отказ от ожидания рядом со временем до ответа и образцами поступления. Люди бросают, когда ожидание дольше, чем они рассчитывали, поэтому доля растёт с ожиданием, а ожидание растёт, когда поступления превышают ёмкость. Теория массового обслуживания объясняет, почему ожидание резко растёт, когда очередь приближается к полной загрузке, и поэтому служба, работающая почти на 100 % занятости, всегда имеет долгие ожидания и высокий отказ. Планируйте штат по образцам поступления по часам и дням, а не по месячному среднему, и показывайте отказ по времени суток (см. тему 2.3, Работа в процессе и теория очередей).
Определяйте решение с первого контакта тщательно, затем измеряйте со стороны пользователя
Используйте определение на основе повторного обращения и подтверждайте его коротким вопросом пользователям. Подсчёт только обращений, не возвращающихся в заявленное окно, труднее раздуть, чем флаг оператора, выставляемый при закрытии. Добавьте проверку из одного вопроса, например «была ли ваша проблема решена?», и сравните её с цифрой повторных обращений. Когда они расходятся, ответ пользователя служит лучшим ориентиром, а разрыв указывает, где закрытие преждевременно.
Используйте время обработки для планирования, а не для целей
Относитесь ко времени обработки как к входу для ёмкости и диагностике и никогда не задавайте для операторов целевое значение, которое надо побить. Цель по времени обработки оплачивает спешку, раннюю передачу и скудную документацию. Используйте распределение по типу обращения, чтобы планировать штат и находить обращения, занимающие намного дольше похожих, что часто указывает на отсутствующую статью, неуклюжий инструмент или неясный процесс. Цельтесь в системные причины, а не в операторов.
Свяжите показатели службы поддержки с работой поставки
Пересматривайте главные категории обращений с командами, владеющими услугами. Каждый месяц берите пять категорий, породивших больше всего обращений на 100 пользователей, и спрашивайте, какое изменение выше по течению убрало бы их: исправление, статья, лучшее сообщение об ошибке или маршрут самообслуживания. Записывайте ответы в бэклог владеющей команды. Это превращает числа службы поддержки в работу по улучшению и есть самое ясное применение данных в духе Agile (см. тему 3.6, Метрики управления знаниями, и тему 3.7, Метрики самообслуживания и автоматизации).
Включайте каждый канал в одни и те же определения
Применяйте одни и те же часы и правила подсчёта к телефону, чату, электронной почте, порталу, личному визиту и мессенджеру. У асинхронных каналов нет живой очереди, поэтому время до ответа значит в каждом разное. Определите часы по каналу и сообщайте каждый отдельно, прежде чем объединять. Служба, публикующая только свой лучший канал, прячет опыт всех остальных.
Связывайте показатели с опытом пользователя
Парьте операционные показатели с вопросом об удовлетворённости после обращения и полем свободного текста. Быстрый ответ на грубое или бесполезное обращение есть плохой результат, а часы его не видят. Показывайте долю ответивших и состав ответивших рядом с оценкой, потому что отвечает только самоотобранная часть пользователей (см. тему 1.5, Источники данных и инструментирование). Читайте комментарии вместе с людьми, которые отвечают на обращения, в командной обстановке.
Держите показатели на уровне команды и очереди
Сообщайте по очереди, каналу, услуге и команде и держите данные уровня оператора для разговоров о наставничестве, в которых участвует сам оператор. Ранжирование отдельных операторов по времени обработки или доле решения подталкивает к выбору лёгких обращений и избеганию трудных. Оно также подрывает доверие к данным, а пользователи чувствуют результат в качестве помощи. Используйте числа уровня команды, чтобы спрашивать, что нужно системе.
Векторы манипуляции и ограждения
| Метрика | Как её искажают | Парная метрика или практика-ограждение |
|---|---|---|
| Объём обращений | Операторы отбивают охоту регистрировать, направляя пользователей в каналы, которые не считаются, или делят одно обращение на несколько, чтобы очередь выглядела занятой; менеджеры ставят цель на меньший объём | Интенсивность обращений на 100 пользователей и периодическая сверка телефонных счётов со счётами заявок; фиксированное правило, что каждый канал считается |
| Интенсивность обращений | Знаменатель выбирается постфактум (например, широкое определение «активный»), чтобы доля выглядела лучше | Письменное датированное определение «активных пользователей» и сырые счёты, показанные рядом с долей |
| Время до ответа | Обращения отвечаются автоприветствием или передачей в тихую очередь, либо звонок берётся и ставится на удержание; электронная почта получает автоответ, засчитываемый как ответ | Определить часы как первый ответ человека и отслеживать рядом отказ от ожидания и повторные обращения |
| Доля отказов от ожидания | Звонящих сбрасывают до постановки в очередь, льготный период растягивают, либо предложение обратного звонка засчитывают как отвеченное обращение | Перцентили времени до ответа, доля завершённых обратных звонков и опубликованный льготный период |
| Время обработки | Звонки торопят, рано передают или обрывают до решения проблемы; заметки оставляют скудными; работу переносят во время после обращения, которое часы исключают | Решение с первого контакта, доля повторных обращений и выборочная проверка командой качества документации |
| Доля решения с первого контакта | Заявки закрывают во время звонка независимо от результата, «тот же вопрос» читают узко, либо трудные обращения классифицируют как «не должны решаться» | Доля повторных обращений, подтверждение пользователя одним вопросом и периодические аудиты исключений командой |
| Доля повторных обращений | Пользователей просят завести новую заявку для продолжения, либо продолжения записывают под другой категорией, чтобы они не связывались | Правила связывания в инструменте, выборочный аудит несвязанных повторных обращений и решение по сообщению пользователей |
Здоровое чтение есть набор цифр, согласующихся друг с другом. Время до ответа и отказ от ожидания движутся вместе, время обработки меняется с типом обращения, а не с целью дня, решение с первого контакта и повторное обращение суть зеркальные отражения, в сумме близкие к потолку, а ответ пользователя на «была ли ваша проблема решена?» согласуется с цифрой повторных обращений. Одна цифра, резко улучшающаяся, пока остальные стоят на месте, есть повод посмотреть, как она собирается, прежде чем праздновать. Подтасованная служба обычно проявляет симптомы в повторных обращениях, повторяющихся категориях в объёме и растущих жалобах.
Компромиссы: плюсы и минусы
| Выбор | Преимущество | Цена или риск |
|---|---|---|
| Среднее время обработки как главное число | Просто, есть на каждой платформе, легко объяснить | Награждает спешку, прячет хвост и приглашает цели, вредящие решению |
| Медиана и 85-й перцентиль для времён | Описывает типичный случай и медленный хвост | Нужно достаточно обращений для устойчивости и чуть больше пояснений |
| Решение с первого контакта по флагу закрытия оператором | Легко собирать | Легко раздуть и трудно сравнивать между службами |
| Решение с первого контакта по окну повторного обращения | Трудно подтасовать и ближе к опыту пользователя | Нужно хорошее связывание в инструменте и ожидание прохождения окна, прежде чем можно сообщать |
| Отказ от ожидания с льготным периодом | Убирает случайные сбросы | Льготный период можно растянуть, чтобы польстить цифре |
| Интенсивность обращений на 100 пользователей | Отделяет рост от неприятностей | Зависит от надёжного числа пользователей и ясного определения «активный» |
| Опрос после обращения | Улавливает то, чего не видят часы | Низкая и неравномерная доля ответивших и смещение в сторону пользователей с сильными чувствами |
| Отчётность только по команде и очереди | Защищает доверие и фокусируется на системе | Даёт меньше деталей для индивидуального наставничества, которому нужен другой, частный процесс |
Никакой набор показателей не убирает напряжение между скоростью и вниманием. Служба, отвечающая на каждое обращение за секунды и решающая мало, имеет хорошую очередь и плохую услугу, а служба, тратящая время на настоящее решение, покажет более долгое время обработки и ожидания. Путь через это состоит в том, чтобы договориться, какой результат важнее всего в этом квартале, сделать компромисс явным и пересматривать пару метрик, удерживающих баланс. Быстрее лучше только пока держится решение.
Вопросы для обсуждения в команде
1. Что здесь значит «обращение» и совпадает ли наш счёт с тем, что сообщают телефонная платформа и инструмент ITSM? Попросите группу проследить один день обращений по всем каналам и сравнить счёты двух систем. Отметьте обращения, никогда не становящиеся заявками, и заявки, никогда не начинающиеся как обращения. Ведущему стоит ожидать разрыва поначалу и считать его находкой об определениях, а не виной людей. Договоритесь о правиле для следующего отчёта и о том, кто им владеет.
2. Когда мы говорим, что обращение решено при первом контакте, откуда мы знаем, что пользователь согласился бы? Просмотрите десять недавних обращений, помеченных как решённые с первого контакта, и проверьте, возвращался ли кто-то из пользователей по тому же вопросу. Спросите, что оператор мог сделать иначе в тех, что вернулись. Обсуждение обычно показывает, где закрытие происходит раньше, чем пользователь готов. Решите, добавлять ли подтверждение одним вопросом и каким должно быть окно повторного обращения.
3. Что происходит с человеком на удержании и когда он сдаётся? Посмотрите на кривую отказа по времени ожидания. Большинство служб находит точку, за которой люди уходят в больших количествах, и эта точка есть практический предел очереди. Спросите, какие обратные звонки, чаты или автоматические ответы предлагаются и не засчитывается ли что-либо из этого как отвеченное, когда проблема не решена. Ведущий может использовать это, чтобы открыть обсуждение штата по часам, а не по месяцам.
4. Какие из наших чисел времени обработки изменились бы, если бы мы обращали внимание на работу после обращения и на ожидание? Перечислите, что включают часы и что оставляют за скобками. Спросите, чувствовал ли кто-нибудь давление сократить звонки и что он сделал. На этот вопрос проще ответить в команде, чем в отчёте, поэтому дайте людям возможность говорить без атрибуции. Договоритесь об определении и о том, будет ли время обработки использоваться только для планирования.
5. Какие пять категорий породили больше всего обращений на 100 пользователей в прошлом квартале и кто владеет исправлением каждой? Принесите данные по категориям и владельцев лежащих в основе услуг к одному столу. Для каждой категории спросите, что лучше: исправление, статья, лучшее сообщение или маршрут самообслуживания. Смысл в том, чтобы уйти с элементами в бэклоге и названными владельцами. Вернитесь к списку в следующем квартале и посмотрите, какие сдвинулись.
6. Сообщаем ли мы это на уровне команды и очереди и не использует ли кто-нибудь это для сравнения людей? Спросите группу прямо, использовалась ли какая-либо из этих цифр для суждения о человеке и каков был эффект. Обсудите, чего служба перестала бы делать, если бы индивидуальное сравнение прекратилось, и что начала бы. Ведущему стоит записать любые примеры и принести их владельцу метрик для решения о политике. Цель есть письменное обязательство, что данные описывают систему.
Четыре точки зрения
Продуктовые команды и команды поставки
Команды поставки получают от службы поддержки лучший взгляд на собственную услугу. Обращения на 100 пользователей после релиза быстро показывают, запутало ли изменение людей, а категории показывают, что исправлять дальше. Командам следует ожидать ежемесячного пересмотра главных категорий и считать их входом в бэклог, без вины, возлагаемой на службу поддержки за то, что она сообщает то, что говорят ей пользователи. Просите у службы поддержки выборки обращений, а не только счёты, потому что слова, которые используют пользователи, часто выявляют проблему названий или проекта.
Команды услуг и эксплуатации
Персоналу службы поддержки и его руководителям нужны цифры, помогающие планировать и улучшаться, не превращаясь в цели. Штат по часам из образцов поступления, пересмотры повторных обращений и запросы статей суть самые полезные выходы. У персонала должен быть голос в определении метрик, потому что он знает, где часы вводят в заблуждение. Им следует сначала видеть цифры своей команды и иметь возможность их оспорить.
Руководство и управление
Руководителям нужен короткий набор согласующихся цифр: объём и интенсивность обращений, время до ответа и отказ от ожидания, решение с первого контакта и повторные обращения и оценка удовлетворённости пользователей с долей ответивших. Им следует просить распределения и заметки об изменениях определений и сопротивляться постановке единой цели по времени обработки или объёму. Цели только по скорости приглашают описанную выше манипуляцию. Управление должно записывать, кто владеет каждым определением (см. тему 1.4, Управление метриками и ответственность за них).
Клиенты и пользователи
Пользователям важно, дозвонились ли они, обошлись ли с ними хорошо и осталась ли проблема исправленной. Время обработки их не заботит. Рассказ им о том, что измеряет служба поддержки, и действия по их обратной связи строят доверие, как и забота о том, чтобы предпочитаемые ими каналы измерялись и обслуживались персоналом. Клиентам, покупающим услугу, служат ясные обязательства в SLA или соглашении об опыте (см. тему 5.1, Метрики SLA, OLA и XLA, и тему 6.2, Соглашения об уровне опыта).
На практике: пример из управления услугами
ИТ-отдел региональной больницы держит службу поддержки примерно из дюжины сотрудников для около 4000 клинических и административных пользователей. Числа ниже иллюстративны и не относятся ни к какой реальной организации.
Еженедельный вид команды показывает 1900 обращений (иллюстративно), то есть интенсивность 47,5 обращения на 100 пользователей (иллюстративно). Время до ответа по телефону имеет медиану 40 секунд и 85-й перцентиль 6 минут (иллюстративно). Отказ от ожидания составляет 14 % (иллюстративно) и резко растёт в будние утра между 08:00 и 09:30. Медианное время обработки равно 7 минутам, а 85-й перцентиль 22 минутам (иллюстративно). Решение с первого контакта по окну повторного обращения составляет 61 % (иллюстративно), а семидневная доля повторных обращений 19 % (иллюстративно).
На ежемесячном пересмотре руководитель службы поддержки и команда клинических приложений смотрят на категории. Проблемы с входом и пропусками составляют большую долю утренних обращений, а недавнее изменение входа в клиническое приложение породило всплеск обращений об одном и том же сообщении об ошибке. Служба поддержки и команда приложений решают сделать три вещи. Они изменят сообщение об ошибке и добавят ссылку на статью, добавят вариант обратного звонка на утренний пик и сдвинут начало одной смены на час раньше, чтобы покрыть образец поступления в 08:00. Через четыре недели они пересмотрят отказ от ожидания, повторные обращения и интенсивность обращений по этой категории.
К середине квартала менеджер предлагает цель по времени обработки в 5 минут, чтобы сократить очередь. Команда показывает, что обращения 85-го перцентиля суть те медленные, которые важнее всего, и что цель подтолкнула бы операторов обрывать звонки рано. Они также замечают, что решение с первого контакта выросло до 78 % (иллюстративно) за одну неделю, пока доля повторных обращений выросла до 27 % (иллюстративно). Пересмотр обнаруживает, что в нескольких сменах начали закрывать заявки во время звонка с пометкой пользователю перезвонить, что засчитывалось как решение с первого контакта. Команда восстанавливает определение на основе повторного обращения, добавляет вопрос подтверждения пользователем и отказывается от цели по времени обработки. Отказ от ожидания, время до ответа и повторные обращения с тех пор сообщаются вместе.
Agile, ИИ, автоматизация и аналитика
Agile
Относитесь к обратной связи от службы поддержки как к входу для непрерывного улучшения: регулярный пересмотр с заинтересованными сторонами главных причин обращений и одно изменение, чтобы убрать причину. Осторожность в том, что цели по времени обработки подталкивают операторов торопиться; поэтому держите их вне индивидуальных оценок.
ИИ
Сортировка с помощью ИИ и составленные им ответы могут сократить время до ответа и время обработки, меняя то, что доходит до человека, так что оставшиеся обращения труднее, а средние вводят в заблуждение. Парьте скорость с долей повторных обращений и долей составленных ИИ ответов, которые оператор существенно изменил. Осторожность в том, что виртуальный агент, закрывающий разговор, не есть решённая проблема; поэтому считайте обращения, которые возвращаются.
Автоматизация
Собирайте события обращений, очередей и статусов автоматически из телефонных систем и систем заявок и измеряйте автоматизацию маршрутизации по неверным маршрутам и по обращениям, прыгающим между очередями. Осторожность в том, что автоматическая категоризация дрейфует; поэтому выборочно проверяйте заявки на верность категории.
Аналитика
Используйте перцентили для времени ответа, показывайте число обращений за каждой долей и разбивайте причины обращений, чтобы решение состояло в том, какую причину убрать. Осторожность в том, что малые очереди дают шумные проценты; поэтому показывайте интервалы или счёты для услуг малого объёма.
Отраслевой взгляд
Стартап. Служба поддержки часто есть общий почтовый ящик или чат-канал, который обрабатывает тот, кто свободен. Считайте обращения по каналам, помечайте категорию и смотрите на пятёрку лидеров каждый месяц вместе с людьми, строящими продукт. Не покупайте платформу колл-центра, пока объём не оправдывает, и не ставьте целей по скорости, когда на все обращения отвечают два человека.
Малый бизнес. Один человек или внешний поставщик обычно ведёт размещённую службу поддержки. Используйте стандартные отчёты инструмента, просите у поставщика письменные определения обращения, решения и отказа от ожидания и время от времени выгружайте сырые данные. Короткий повторяющийся вопрос пользователям, например «была ли ваша проблема решена?», даёт больше понимания, чем длинная панель.
Крупная компания. Многие очереди, языки, инструменты и поставщики ведут к разным определениям одного слова. Согласуйте общее определение обращения, решения с первого контакта и повторного обращения и общий набор каналов. Сообщайте по очереди и услуге со стандартным видом для руководства и используйте данные управления персоналом, чтобы планировать штат по образцам поступления. Сравнивайте очереди только после проверки, что они используют одни и те же определения.
Государство и публичный сектор. У записей могут быть обязательства по хранению, доступу, аудиту и приватности, а контракт может фиксировать метрики и цели для внешней службы поддержки. Читайте контрактные метрики критически и добавляйте показатели-ограждения в отчётность, даже когда они не требуются. Ведите след аудита изменений определений и избегайте сбора ненужных персональных данных. Общественные услуги часто обслуживают пользователей с ограниченным выбором канала, поэтому доступность каждого канала есть часть картины (см. тему 8.5, Регулируемая и государственная отчётность).
Бизнес-обоснование: мотивы, ROI и TCO
Мотив лучших показателей службы поддержки есть более дешёвая и лучшая услуга, а отдача приходит в трёх местах. Во-первых, меньше повторных обращений: каждое повторное обращение есть работа, которую службе не нужно было делать, и время, которое пользователь не хотел тратить. Во-вторых, исправления выше по течению: данные службы поддержки по категориям могут убрать целые классы обращений, когда команды поставки действуют по ним. В-третьих, лучший штат: данные об образцах поступления позволяют менеджерам ставить людей, когда они нужны пользователям, что одновременно снижает отказ от ожидания и простой.
Цена сбора скромна там, где телефонная платформа и инструмент ITSM уже записывают события. Основные затраты: время на согласование определений, исправление связи между обращениями и заявками, добавление короткого вопроса после обращения и пересмотр данных с командами поставки.
Цифра отдачи здесь не предлагается, потому что опубликованные цифры различаются по организации и методу, и ни одна не проверена для этой темы. Оцените отдачу по своим данным. Возьмите число повторных обращений и измеренное время обработки, умножьте на стоимость часа оператора и сравните с ценой исправления. Описывайте результат как оценку с её допущениями и пересматривайте после изменения (см. тему 7.7, Возврат инвестиций и бизнес-обоснование).
Антипаттерны и ловушки
- Цель по среднему времени обработки. Она награждает спешку и раннюю передачу. Используйте распределение по типу обращения для планирования и парьте его с решением с первого контакта и повторными обращениями.
- Учёт флага закрытия, выставляемого оператором, как решения с первого контакта. Его можно выставить независимо от результата. Используйте окно повторного обращения и подтверждение пользователя.
- Ранжирование отдельных операторов. Это подталкивает к выбору лёгкого и защитному поведению. Сообщайте по команде и очереди и держите индивидуальные разговоры частными и поддерживающими.
- Сообщение среднего по всем каналам, прячущего самый слабый канал. Телефон, чат и электронная почта ведут себя по-разному. Сообщайте каждый канал отдельно, прежде чем объединять.
- Чтение объёма без знаменателя. Рост может быть ростом базы. Показывайте обращения на 100 пользователей и состав категорий.
- Оставление службы поддержки вне решений о поставке. Счёты, переданные на панель и никогда не обсуждённые с командой продукта, пропадают зря. Проводите ежемесячный пересмотр главных категорий с их владельцами.
Модель зрелости
| Измерение | 1 Инициирование | 2 Развитие | 3 Стандартизация | 4 Управление | 5 Оркестрация |
|---|---|---|---|---|---|
| Определения и часы | Каждый считает обращения по-своему | Несколько определений записаны для некоторых очередей | Одно письменное определение на метрику, включая начало и конец часов и исключения | Изменения определений записываются и пересматриваются по графику | Определения разделяются с поставщиками и клиентами и пересматриваются, когда перестают информировать решения |
| Сбор и качество данных | Счёты собираются вручную из выгрузок | Данные телефонии и ITSM сообщаются раздельно | Обращения и заявки связаны, автоматический сбор по каналам | Связь, полнота и сверка измеряются и отслеживаются во времени | Данные об обращениях разделяются между командами и поставщиками через согласованные интерфейсы |
| Использование в улучшении | Числа сообщаются, но редко обсуждаются | Случайный пересмотр загруженных периодов | Ежемесячный пересмотр главных категорий с владельцами услуг | Улучшения планируются, финансируются и проверяются по повторным обращениям и объёму | Данные службы поддержки управляют приоритетами бэклога между продуктовыми командами и поставщиками |
| Ограждения и доверие | Цели по скорости применяются к людям | Некоторое осознание манипуляции | Парные показатели сообщаются вместе, нет индивидуального рейтинга | Проверки манипуляции проводятся командой, используется подтверждение пользователя | Пользователи и персонал помогают задавать показатели и видят результаты |
Контрольный список
- Обращения и заявки определены и считаются отдельно, и счёты сходятся.
- Для каждого канала есть письменные часы времени до ответа и заявленный способ обращения с автоматическими ответами.
- Показатели времени сообщаются как медиана и высокий перцентиль с размером выборки.
- У отказа от ожидания есть письменный льготный период, и он показывается вместе со временем до ответа.
- Решение с первого контакта использует окно повторного обращения и заявленный смысл «того же вопроса».
- Собирается подтверждение пользователем одним вопросом, с показанной долей ответивших.
- Интенсивность обращений на 100 пользователей сообщается, с письменным определением «активного пользователя».
- Для операторов не задана цель по времени обработки, и ни один показатель не ранжирует людей.
- Главные категории обращений пересматриваются ежемесячно с владеющими командами, а действия попадают в бэклог.
- Определения находятся под контролем версий, и каждое изменение датировано.
Промпты для ИИ
Составьте черновик точных определений основных показателей службы поддержки.
I am writing definitions for these service desk measures: [list of measures,
for example contact volume, time to answer, abandonment, handle time, first
contact resolution, recontact]. Our channels are [list channels] and our tools
are [telephony or chat platform and ITSM tool]. For each measure, draft the
definition, formula, clock start and stop, inclusions and exclusions, unit, and
data source. Use the same terms throughout and do not invent benchmark values or
targets. List your assumptions and the questions I should answer to finish.
Проверьте набор цифр службы поддержки на признаки манипуляции.
Here are our service desk figures for [period]: [paste figures such as volume,
time to answer percentiles, abandonment, handle time percentiles, first contact
resolution, recontact]. Our definitions are [paste definitions]. Look for
patterns that suggest a figure improved because of how it is collected and not
because the service improved, and suggest what to check in the data for each.
Do not accuse individuals and do not invent thresholds. List your assumptions
and what you could not determine from the data given.
Подготовьте ежемесячный пересмотр главных категорий обращений.
I am preparing a monthly review of service desk contact categories for
[service or team]. I have [category counts and contacts per 100 users for the
last three months]. Draft an agenda, a short table template, and a list of
questions to ask each service owner about causes, fixes, articles, and
self-service options. Suggest how to record actions in a backlog. Do not invent
numbers or causes. List your assumptions and the data I should bring.
Спроектируйте короткий опрос после обращения.
I want to measure whether users felt helped after contacting the [service desk
name] by [channel]. Draft [number] neutral questions, including one on whether
the issue was resolved, a plan for when to send them, and how to report the
response rate and respondent mix. Flag wording that could bias answers and note
privacy considerations given the data will be held in [tool]. Do not invent
benchmark response rates. List your assumptions.
Навыки ИИ
- Service Management Metrics skill: используйте, чтобы найти, какая тема определяет связанную метрику, и ограждение, которое должно стоять рядом с показателем службы поддержки.
- Service Management Metrics maintainer skill: используйте, чтобы проверить, что правки этой темы сохраняют каждую метрику спаренной с вектором манипуляции и ограждением.
Главные выводы
- Считайте обращения и заявки отдельно, определите оба и нормируйте объём на размер базы пользователей.
- Сообщайте времена как медиану и высокий перцентиль и говорите, на скольких обращениях стоит каждая цифра.
- Читайте скорость ответа, отказ от ожидания и время обработки как признаки усилия и парьте их с решением с первого контакта и повторными обращениями как признаками результата.
- Определяйте решение с первого контакта тем, возвращается ли пользователь, и подтверждайте его проверкой одним вопросом.
- Используйте службу поддержки как датчик: пересматривайте главные категории ежемесячно с командами, владеющими услугами.
- Измеряйте очереди, каналы и услуги и никогда не ранжируйте отдельных операторов.
Источники и дополнительное чтение
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
- Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- AXELOS, ITIL Foundation: ITIL 4 Edition, TSO (The Stationery Office), 2019.
- ISO/IEC 20000-1:2018, Information technology: Service management: Part 1: Service management system requirements, International Organization for Standardization.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997, pp. 305-321.
- Wikipedia, Служба технической поддержки.
- Wikipedia, Управление ИТ-услугами.
- Wikipedia, ITIL.
- Wikipedia, Колл-центр.
- Wikipedia, Решение с первого звонка.
- Wikipedia, Автоматический распределитель вызовов.
- Wikipedia, Соглашение об уровне услуг.
- Wikipedia, Перцентиль.
- Wikipedia, Удовлетворённость клиентов.
- Wikipedia, Теория массового обслуживания.