Uma equipe pode encerrar todo incidente dentro da meta, entregar toda mudança no prazo e ainda assim deixar os usuários frustrados. Os números operacionais descrevem o que a organização de serviços fez. Os números de experiência descrevem o que o usuário sentiu e alcançou. Ambos são necessários, porque um painel verde e um cliente descontente podem existir lado a lado, e só o segundo decide se o serviço é valorizado.

O ágil e o ITIL se encontram aqui naturalmente. A prática ágil trata o software funcionando e a colaboração com o cliente como a medida do progresso e usa o feedback frequente para se orientar. O ITIL 4 descreve o valor como cocriado com o consumidor, e não entregue a ele; assim a experiência e os resultados do consumidor fazem parte do serviço, e não são um relatório escrito depois. Medir a experiência significa, portanto, coletar esse feedback de propósito, lê-lo com honestidade e agir sobre ele com rapidez suficiente para que importe.

Os dados de experiência também são fáceis de interpretar mal. As pontuações de pesquisa dependem de quem responde, de quando são perguntadas e de como a pergunta é redigida. Amostras pequenas oscilam muito, e uma pontuação que sobe pode refletir apenas uma mudança em quem responde. Leia toda medida desta parte como evidência sobre uma equipe, um serviço ou uma jornada, nunca como uma classificação de indivíduos, e pareie-a com uma barreira de proteção para que não possa ser melhorada mudando a pesquisa em vez do serviço (veja o tópico 1.2, A lei de Goodhart e a psicologia das métricas).

As quatro lentes importam de um modo específico aqui. O envolvimento contínuo das partes interessadas é a fonte da evidência de experiência. Os contatos tratados por IA devem ser relatados separadamente, com uma pessoa lendo uma amostra de comentários, já que os modelos podem interpretar mal o tom. As pesquisas automatizadas precisam de uma checagem de quem responde. A análise mostra as pontuações com a contagem de respostas, e os limites da atribuição são declarados.

Tópicos desta parte

  • 6.1 Métricas de satisfação do cliente: satisfação do cliente (CSAT), net promoter score (NPS), customer effort score (CES), projeto de pesquisas, viés de resposta e tamanho da amostra.
  • 6.2 Acordos de nível de experiência: medir a experiência em vez de apenas metas operacionais, usando sentimento, esforço e medidas de jornada.
  • 6.3 Métricas de adoção de serviços e catálogo: uso dos itens do catálogo, adoção e abandono, mistura de requisições e tratamento do catálogo como um backlog de produto.
  • 6.4 Experiência de usuários e colaboradores: experiência digital do colaborador, atrito, tempo perdido com problemas de TI e resultados para o cliente interno.
  • 6.5 Realização de valor e resultados de negócio: ligar o trabalho de serviço aos resultados de negócio, acompanhamento de benefícios e os limites da atribuição.

Como estes tópicos se relacionam

O tópico 6.1 (veja o tópico 6.1, Métricas de satisfação do cliente) fornece os instrumentos básicos: as medidas de pesquisa e a disciplina para coletá-las. Também expõe os limites desses instrumentos, incluindo o viés de resposta e o tamanho da amostra, que se aplicam a todos os outros tópicos da parte. Leia-o primeiro, porque os tópicos seguintes reutilizam suas medidas e herdam suas cautelas.

O tópico 6.2 (veja o tópico 6.2, Acordos de nível de experiência) pega esses instrumentos e os usa para complementar as metas operacionais. Um serviço pode cumprir uma meta de tempo de resposta e ainda assim produzir uma experiência ruim; por isso um acordo de nível de experiência fica ao lado do acordo de nível de serviço convencional e não o substitui. O pareamento funciona nos dois sentidos. Os dados operacionais explicam por que uma pontuação de experiência se moveu, e os dados de experiência mostram se uma meta operacional está apontada para a coisa certa.

Os tópicos 6.3 e 6.4 olham o comportamento e o atrito em vez da opinião. A adoção e o abandono do tópico 6.3 (veja o tópico 6.3, Métricas de adoção de serviços e catálogo) mostram o que as pessoas realmente fazem, o que confere o que dizem em uma pesquisa. O atrito e o tempo perdido do tópico 6.4 (veja o tópico 6.4, Experiência de usuários e colaboradores) mostram o custo de um serviço ruim para o cliente interno. As medidas de comportamento protegem as medidas de pesquisa contra respostas educadas ou pouco representativas, e as pesquisas explicam o comportamento que os dados de uso sozinhos não conseguem.

O tópico 6.5 (veja o tópico 6.5, Realização de valor e resultados de negócio) fecha a parte perguntando se algo disso mudou um resultado que importa ao negócio. É o tópico mais cauteloso, porque a atribuição é difícil: muitas coisas movem um resultado de negócio, e uma equipe de serviço deve reivindicar apenas o que suas evidências sustentam. Protege o resto da parte contra medir a satisfação por si mesma.

Vários pares de barreiras de proteção decorrem disso. Uma pontuação de satisfação deve ser lida com sua taxa de resposta e seu tamanho de amostra. Uma medida de esforço ou de sentimento deve ser lida com os dados operacionais por trás. Uma cifra de adoção deve ser lida com o abandono, para que um item popular do catálogo que as pessoas abandonam não seja contado como sucesso. As medidas de resolução rápida de partes anteriores devem ser lidas com a satisfação, para que a velocidade não seja comprada com maus resultados (veja o tópico 2.2, Lead time, tempo de ciclo e eficiência de fluxo, para os relógios que essas medidas de velocidade usam).

As partes seguintes continuam o mesmo fio. As medidas financeiras e de nível de serviço das Partes 7 e 8 descrevem custo e compromisso, e a visão de experiência desta parte é a conferência de que o custo e o compromisso estão voltados para algo que os usuários valorizam.