Listas de verificação
Três listas de verificação para a equipe do programa: uma para rever uma única métrica, uma para lançar um painel e uma para auditar um programa de métricas. Use-as como estímulos para uma conversa com as equipes, e não como um formulário a preencher e arquivar. Adapte-as e abandone os itens que não servem ao seu contexto.
Lista de verificação de revisão de métrica
Use-a antes de uma métrica ser adotada e em cada revisão periódica (veja o tópico 1.4, Governança e responsabilidade das métricas).
Propósito
- A métrica responde a uma pergunta que um público nomeado fez.
- A decisão que ela deve informar está escrita.
- Mede um resultado, ou está claramente pareada com um (veja o tópico 1.3, Resultados acima da produção: escolher o que medir).
Definição
- Existem uma definição escrita, uma fórmula, uma unidade e uma fonte de dados.
- As regras do relógio ou de fronteira são explícitas (quando a contagem começa, para e pausa).
- Há um responsável nomeado e uma pessoa a quem perguntar quando o número parece errado.
- Os limites conhecidos dos dados estão registrados, incluindo lacunas e mudanças em como foram inseridos.
Honestidade
- O vetor de manipulação mais provável está escrito.
- Há uma métrica ou prática de barreira de proteção pareada.
- A métrica descreve uma equipe, um serviço ou um sistema e nunca classifica indivíduos.
- As medidas de tempo mostram uma mediana e um percentil alto, com o tamanho da amostra (veja o tópico 1.6, Letramento estatístico para métricas de serviço).
- Existe uma linha de base de vários períodos, para que as mudanças possam ser lidas contra a variação comum.
Uso
- A equipe que faz o trabalho vê o número primeiro e ajudou a defini-lo.
- A última revisão levou a uma decisão registrada, incluindo uma decisão de esperar.
- Uma condição para aposentar a métrica está escrita.
Lista de verificação de lançamento de painel
Use-a antes de um painel ser mostrado ao seu público (veja o tópico 11.1, Projetar um painel de métricas de serviço).
Público e conteúdo
- O público e suas perguntas estão escritos, e o público ajudou a rever um esboço.
- A visão tem no máximo cerca de nove medidas, com o detalhe um passo abaixo.
- O conjunto é equilibrado entre fluxo, qualidade, confiabilidade, experiência e custo.
- Toda medida tem uma companheira que protege contra sua provável distorção.
Clareza
- Todo valor mostra tendência e contexto, com os eventos anotados.
- Toda medida tem uma definição, fonte, responsável, hora de atualização e lacunas conhecidas a um clique.
- As metas são mostradas como referências, e qualquer cor de status segue uma regra declarada que admite variação.
- A decoração que não acrescenta informação foi removida.
Confiança e operação
- O estatuto foi combinado, e as visões em nível individual estão desligadas (veja o tópico 11.3, Implantar métricas sem criar medo).
- As equipes viram os próprios dados e tiveram tempo para corrigi-los.
- Os dados são puxados automaticamente, com verificações de atualidade e reconciliação com a fonte (veja o tópico 11.2, Panorama de ferramentas).
- Existem um responsável nomeado, uma data de revisão e uma via de contestação.
- Os relatórios que este painel substitui têm uma data de aposentadoria.
Lista de verificação de auditoria do programa
Use-a duas vezes por ano, com as equipes, ao lado da autoavaliação (veja o tópico 12.5, Autoavaliação de maturidade).
Propósito e confiança
- O programa tem um patrocinador e um estatuto escrito que os líderes seguem.
- As quebras relatadas do estatuto foram tratadas e os resultados publicados sem nomes.
- As pesquisas das equipes e os relatos de quase acidentes não sugerem medo crescente.
- Nenhuma tabela classificatória de equipes ou indivíduos existe em qualquer ferramenta ou slide da organização.
Medidas e dados
- Cada equipe consegue nomear as decisões que suas medidas informaram no último trimestre.
- As definições são mantidas em um catálogo portável, com responsáveis.
- A cobertura de fontes, a confiabilidade do pipeline e a reconciliação são conferidas e visíveis.
- Uma exportação das definições e do histórico foi testada no último ano.
Equilíbrio e amplitude
- As medidas de resultado ficam ao lado das medidas de atividade em cada visão.
- As medidas relacionadas a IA seguem linhas de base, amostragem e resultados verificados, e não só o volume (veja o tópico 10.4, Inflação de métricas e diluição da qualidade).
- As medidas de automação e de pipeline incluem falhas, rollback e contorno, e cada automação tem um responsável (veja o tópico 10.6, Métricas de automação e orquestração, e o tópico 10.7, Métricas de pipelines e mudança automatizada).
- A qualidade de dados e a incerteza são mostradas ao lado dos números, e as alegações sobre o ITIL 5 são rotuladas como verificadas ou não confirmadas (veja o tópico 10.8, Métricas de análise e qualidade de dados, e o tópico 1.8, Medição do ITIL 5 e resultados de valor).
- As medidas de custo, risco e pessoas estão presentes onde importam, e nenhuma é usada para classificar indivíduos.
Melhoria
- As ações de melhoria da última revisão estão concluídas ou abandonadas com um motivo.
- Medidas e relatórios foram aposentados no último ano.
- O esforço de medição pedido às equipes foi estimado e é aceitável para elas.
- O próprio programa foi revisto com as equipes, e o plano mudou em consequência (veja o tópico 11.5, Um roteiro de adoção incremental).