Todo cambio en un servicio en vivo es una apuesta. Puede entregar valor antes, o puede romper algo de lo que dependen los usuarios. La Parte 3 midió lo bien que funcionan el soporte y el restablecimiento cuando las cosas van mal (véase el tema 3.0, Introducción a la Parte 3: Métricas del centro de servicios, incidentes y solicitudes). Esta parte mira la otra cara de la misma moneda: cómo entra el cambio en el entorno, con qué frecuencia causa problemas y lo bien que aprende la organización para que los mismos problemas no vuelvan.

La entrega continua e ITIL abordan este terreno desde direcciones distintas. La práctica ágil favorece la entrega continua de software en cambios pequeños y trata la retroalimentación rápida como una medida de seguridad. Las prácticas de ITIL como la gestión de problemas, la habilitación de cambios y la gestión de versiones existen para proteger la estabilidad y para encontrar y eliminar las causas de los incidentes. Las métricas de esta parte permiten comprobar ambas visiones frente a la misma evidencia. Si el cambio frecuente es seguro, las medidas de fallo y de retrabajo lo mostrarán. Si un control frena la entrega sin reducir el riesgo, lo mostrarán en cambio las medidas de aprobación y de plazo de entrega.

Dos precauciones recorren toda la parte. La velocidad y la estabilidad deben leerse juntas, porque un número que mejora una dañando en silencio la otra es un mal trato. Las medidas de tiempo deben leerse además como distribuciones con percentiles, como se expone en la Parte 1 (véase el tema 1.6, Alfabetización estadística para métricas de servicio). Toda métrica de aquí describe un equipo, un servicio o un sistema. Ninguna clasifica a un individuo y ninguna es un objetivo que deba empujarse de forma aislada (véase el tema 1.2, Ley de Goodhart y psicología de las métricas).

Las cuatro lentes dan forma a esta parte. La entrega continua hace de los cambios pequeños y frecuentes la norma, de modo que las medidas de cambios y de versiones describen a la vez el flujo y la seguridad. Los cambios asistidos por IA y las puntajes de riesgo generadas por IA necesitan su propio emparejamiento de calidad. Los pipelines automatizan las evidencias y las aprobaciones, así que la automatización debe medirse por sus fallos. La analítica vincula cambios, incidentes y problemas, e indica cuántos casos hay detrás de cada tasa.

Temas de esta parte

  • 4.1 Métricas de gestión de problemas: problemas abiertos y cerrados, reutilización de errores conocidos, recurrencia y tiempo hasta la corrección permanente.
  • 4.2 Métricas de análisis posteriores y aprendizaje: finalización de revisiones, cierre de acciones, recurrencia de causas y señales de aprendizaje sin culpas.
  • 4.3 Métricas de habilitación de cambios: volumen de cambios por tipo, plazo de entrega de la aprobación, proporción de cambios estándar y automatización de la aprobación.
  • 4.4 Fallos de cambio y retrabajo: tasa de fallos de cambio, proporción de cambios de emergencia, tasas de reversión y de arreglos urgentes, y definiciones coherentes de fallo.
  • 4.5 Métricas de versiones y despliegues: frecuencia de despliegue, frecuencia de versiones, uso de indicadores de funciones, plazo de entrega de las versiones y separación entre despliegue y publicación.
  • 4.6 Deuda técnica y errores conocidos: lista de pendientes de errores conocidos, stock e intereses de la deuda y priorización de las correcciones frente al trabajo de funciones.

Cómo se relacionan estos temas

La parte se divide en dos mitades que dependen una de otra. Los temas 4.1 y 4.2 tratan del aprendizaje: cómo se rastrean los incidentes hasta sus causas y cómo las revisiones se convierten en correcciones que se completan. Los temas 4.3, 4.4 y 4.5 tratan del cambio: cómo se aprueba, con qué frecuencia falla y cómo llega a los usuarios. El tema 4.6 une las mitades, porque la deuda y los errores conocidos que descubre el aprendizaje son los mismos elementos que compiten con las funciones nuevas por el tiempo del equipo.

El emparejamiento más importante es el que hay entre la velocidad y el fallo. La frecuencia de despliegue y de versiones del tema 4.5 (véase el tema 4.5, Métricas de versiones y despliegues) describe con qué frecuencia llega el cambio a producción, y el programa de investigación DORA empareja esas medidas de caudal con medidas de estabilidad (véase el tema 2.8, Métricas DORA). El tema 4.4 (véase el tema 4.4, Fallos de cambio y retrabajo) aporta ese lado de la estabilidad. Un equipo que despliega más a menudo mientras sus tasas de fallo y de retrabajo se mantienen planas o bajan está mejorando. Un equipo cuya frecuencia sube mientras suben con ella las reversiones y los arreglos urgentes está trasladando el costo a otra parte.

La habilitación de cambios se sitúa entre ambos. El tema 4.3 (véase el tema 4.3, Métricas de habilitación de cambios) mide el lado del control: cuánto tarda la aprobación, cuánto cambio está preautorizado como estándar y cuánta de la aprobación está automatizada. El plazo de entrega de la aprobación es el costo de un control, y la tasa de fallos de cambio del tema 4.4 es la evidencia de si ese control funciona. Leídos juntos, muestran si un paso de aprobación pesado está comprando seguridad o solo añadiendo retraso, y si una aprobación más ligera y automatizada ha mantenido estable el fallo.

Los temas de aprendizaje protegen a los demás. La gestión de problemas del tema 4.1 (véase el tema 4.1, Métricas de gestión de problemas) mide la recurrencia y el tiempo hasta la corrección permanente, que es la prueba a largo plazo de si la gestión de incidentes de la Parte 3 elimina causas o solo restablece el servicio. El tema 4.2 (véase el tema 4.2, Métricas de análisis posteriores y aprendizaje) comprueba que las revisiones se celebran de verdad y que sus acciones se cierran, ya que una revisión completada sin seguimiento no cambia nada. Contar revisiones o problemas cerrados es fácil de manipular, así que estos recuentos deben leerse junto a la recurrencia de las mismas causas, que es más difícil de falsificar.

Por último, el tema 4.6 (véase el tema 4.6, Deuda técnica y errores conocidos) explica por qué se desvían las demás medidas. Los errores conocidos sin atender y la deuda acumulada elevan la probabilidad de fallo y el costo de cada cambio posterior. Leer la lista de pendientes de errores conocidos junto a la tasa de fallos de cambio muestra cuándo aplazar las correcciones ha empezado a frenar la entrega.

Las partes posteriores se apoyan en estas medidas. Los objetivos de nivel de servicio y los presupuestos de errores de la Parte 5 dan un límite de fiabilidad frente al cual juzgar el ritmo del cambio, y la Parte 11 muestra cómo introducir estas medidas sin sembrar miedo.