Três listas de verificação para a equipe do programa: uma para rever uma única métrica, uma para lançar um painel e uma para auditar um programa de métricas. Use-as como estímulos para uma conversa com as equipes, e não como um formulário a preencher e arquivar. Adapte-as e abandone os itens que não servem ao seu contexto.

Lista de verificação de revisão de métrica

Use-a antes de uma métrica ser adotada e em cada revisão periódica (veja o tópico 1.4, Governança e responsabilidade das métricas).

Propósito

  • A métrica responde a uma pergunta que um público nomeado fez.
  • A decisão que ela deve informar está escrita.
  • Mede um resultado, ou está claramente pareada com um (veja o tópico 1.3, Resultados acima da produção: escolher o que medir).

Definição

  • Existem uma definição escrita, uma fórmula, uma unidade e uma fonte de dados.
  • As regras do relógio ou de fronteira são explícitas (quando a contagem começa, para e pausa).
  • Há um responsável nomeado e uma pessoa a quem perguntar quando o número parece errado.
  • Os limites conhecidos dos dados estão registrados, incluindo lacunas e mudanças em como foram inseridos.

Honestidade

  • O vetor de manipulação mais provável está escrito.
  • Há uma métrica ou prática de barreira de proteção pareada.
  • A métrica descreve uma equipe, um serviço ou um sistema e nunca classifica indivíduos.
  • As medidas de tempo mostram uma mediana e um percentil alto, com o tamanho da amostra (veja o tópico 1.6, Letramento estatístico para métricas de serviço).
  • Existe uma linha de base de vários períodos, para que as mudanças possam ser lidas contra a variação comum.

Uso

  • A equipe que faz o trabalho vê o número primeiro e ajudou a defini-lo.
  • A última revisão levou a uma decisão registrada, incluindo uma decisão de esperar.
  • Uma condição para aposentar a métrica está escrita.

Lista de verificação de lançamento de painel

Use-a antes de um painel ser mostrado ao seu público (veja o tópico 11.1, Projetar um painel de métricas de serviço).

Público e conteúdo

  • O público e suas perguntas estão escritos, e o público ajudou a rever um esboço.
  • A visão tem no máximo cerca de nove medidas, com o detalhe um passo abaixo.
  • O conjunto é equilibrado entre fluxo, qualidade, confiabilidade, experiência e custo.
  • Toda medida tem uma companheira que protege contra sua provável distorção.

Clareza

  • Todo valor mostra tendência e contexto, com os eventos anotados.
  • Toda medida tem uma definição, fonte, responsável, hora de atualização e lacunas conhecidas a um clique.
  • As metas são mostradas como referências, e qualquer cor de status segue uma regra declarada que admite variação.
  • A decoração que não acrescenta informação foi removida.

Confiança e operação

  • O estatuto foi combinado, e as visões em nível individual estão desligadas (veja o tópico 11.3, Implantar métricas sem criar medo).
  • As equipes viram os próprios dados e tiveram tempo para corrigi-los.
  • Os dados são puxados automaticamente, com verificações de atualidade e reconciliação com a fonte (veja o tópico 11.2, Panorama de ferramentas).
  • Existem um responsável nomeado, uma data de revisão e uma via de contestação.
  • Os relatórios que este painel substitui têm uma data de aposentadoria.

Lista de verificação de auditoria do programa

Use-a duas vezes por ano, com as equipes, ao lado da autoavaliação (veja o tópico 12.5, Autoavaliação de maturidade).

Propósito e confiança

  • O programa tem um patrocinador e um estatuto escrito que os líderes seguem.
  • As quebras relatadas do estatuto foram tratadas e os resultados publicados sem nomes.
  • As pesquisas das equipes e os relatos de quase acidentes não sugerem medo crescente.
  • Nenhuma tabela classificatória de equipes ou indivíduos existe em qualquer ferramenta ou slide da organização.

Medidas e dados

  • Cada equipe consegue nomear as decisões que suas medidas informaram no último trimestre.
  • As definições são mantidas em um catálogo portável, com responsáveis.
  • A cobertura de fontes, a confiabilidade do pipeline e a reconciliação são conferidas e visíveis.
  • Uma exportação das definições e do histórico foi testada no último ano.

Equilíbrio e amplitude

  • As medidas de resultado ficam ao lado das medidas de atividade em cada visão.
  • As medidas relacionadas a IA seguem linhas de base, amostragem e resultados verificados, e não só o volume (veja o tópico 10.4, Inflação de métricas e diluição da qualidade).
  • As medidas de automação e de pipeline incluem falhas, rollback e contorno, e cada automação tem um responsável (veja o tópico 10.6, Métricas de automação e orquestração, e o tópico 10.7, Métricas de pipelines e mudança automatizada).
  • A qualidade de dados e a incerteza são mostradas ao lado dos números, e as alegações sobre o ITIL 5 são rotuladas como verificadas ou não confirmadas (veja o tópico 10.8, Métricas de análise e qualidade de dados, e o tópico 1.8, Medição do ITIL 5 e resultados de valor).
  • As medidas de custo, risco e pessoas estão presentes onde importam, e nenhuma é usada para classificar indivíduos.

Melhoria

  • As ações de melhoria da última revisão estão concluídas ou abandonadas com um motivo.
  • Medidas e relatórios foram aposentados no último ano.
  • O esforço de medição pedido às equipes foi estimado e é aceitável para elas.
  • O próprio programa foi revisto com as equipes, e o plano mudou em consequência (veja o tópico 11.5, Um roteiro de adoção incremental).