Un service peut être rapide, peu coûteux et apprécié, et pourtant décevoir les personnes qui en dépendent, à cause d'une faiblesse non corrigée, d'un risque non examiné, d'une obligation que personne n'a suivie ou d'un fournisseur qui a cessé de livrer. Les mesures de cette partie décrivent les conditions qui protègent contre ces défaillances : combien de temps les faiblesses restent ouvertes, si les contrôles fonctionnent, si les preuves existent quand quelqu'un les demande, et si vous savez de quoi vous dépendez et pourriez le quitter.

La pratique agile et ITIL prennent ces préoccupations au sérieux, sous des angles différents. ITIL apporte la gestion de la sécurité de l'information, la gestion des risques, la gestion des fournisseurs et la gouvernance, avec leur accent sur la politique, la responsabilité et les enregistrements. L'agilité et DevOps apportent l'idée que la sécurité et le contrôle appartiennent à l'intérieur de la livraison continue : petits changements, retour rapide, contrôles automatisés et responsabilité partagée entre le développement, la sécurité, l'exploitation et l'assurance. Les organisations les plus efficaces combinent les deux, de sorte que les contrôles sont intégrés au pipeline, que les preuves sont un sous-produit de la livraison, et que les auditeurs, les régulateurs et les fournisseurs sont des partenaires d'une conversation continue plutôt que des adversaires occasionnels.

Ces mesures portent aussi les enjeux de distorsion les plus élevés. Des objectifs sur les constats, les risques rouges ou les brèches apprennent aux gens à détourner le regard, à réévaluer ou à cacher. Les mesures qui touchent le comportement humain, comme les signalements d'activité suspecte, peuvent glisser vers la surveillance ou le blâme. Chaque métrique de cette partie vient donc avec la façon dont elle est détournée et un garde-fou, et la partie traite le signalement sûr et l'apprentissage sans blâme comme des contrôles à part entière. Aucune des mesures ne classe des individus. Elles décrivent des systèmes, des services et des relations (voir le sujet 1.2, Loi de Goodhart et psychologie des métriques).

Les quatre angles comptent ici parce que les systèmes d'IA ajoutent de nouveaux risques et de nouvelles obligations. Les preuves de sécurité et de conformité sont de plus en plus produites par des pipelines : l'automatisation doit donc être testée, non crue sur parole. Les fournisseurs peuvent intégrer de l'IA, alors demandez ce qui est activé. L'analytique rapporte l'exposition et l'efficacité des contrôles avec la taille des échantillons. Ce livre ne donne aucun avis juridique : vérifiez donc les obligations auprès de votre propre conseiller juridique.

Sujets de cette partie

  • 8.1 Métriques des incidents de sécurité et des vulnérabilités : fenêtres d'exposition, conformité des correctifs, couverture des analyses, temps de confinement, exceptions et culture de signalement qui garde les signaux en circulation.
  • 8.2 Métriques des risques et des contrôles : un registre des risques court et détenu, tests des contrôles, indicateurs de risque clés et approbation des changements fondée sur le risque.
  • 8.3 Métriques de conformité et d'audit : couverture des obligations, automatisation des preuves, clôture et récurrence des constats, et travail avec les auditeurs.
  • 8.4 Métriques des fournisseurs et des contrats : performance des fournisseurs face à l'expérience, concentration, diligence raisonnable, revues conjointes et plans de sortie testés.
  • 8.5 Rapports réglementaires et gouvernementaux : obligations de rapport comme intrants de conception, rapports traçables, définitions rapprochées et information publique utilisable.

Comment ces sujets s'articulent

Les mesures de sécurité (voir le sujet 8.1, Métriques des incidents de sécurité et des vulnérabilités) décrivent les menaces et les faiblesses en termes concrets, et elles fournissent certains des indicateurs de risque clés les plus solides pour le registre des risques. Les mesures de risque et de contrôle (voir le sujet 8.2, Métriques des risques et des contrôles) placent ces indicateurs en contexte, décident quels contrôles comptent et testent qu'ils fonctionnent. Les mesures de conformité et d'audit (voir le sujet 8.3, Métriques de conformité et d'audit) transforment les mêmes contrôles et tests en preuves pour des tiers, et elles montrent quelle part de ces preuves le travail produit de lui-même.

Les mesures sur les fournisseurs (voir le sujet 8.4, Métriques des fournisseurs et des contrats) prolongent chacune de celles-ci au-delà de la frontière de l'organisation. Les vulnérabilités, les risques et la posture de conformité d'un fournisseur deviennent les vôtres, et le contrat est l'un des contrôles. Le sujet des rapports (voir le sujet 8.5, Rapports réglementaires et gouvernementaux) clôt la partie en demandant ce qui doit être dit à qui, et comment le dire avec exactitude sans laisser la vue du rapport fausser le travail qu'elle décrit.

Plusieurs couples de garde-fous en découlent. Une fenêtre d'exposition doit se lire avec la couverture des analyses, pour qu'un chiffre propre ne soit pas simplement une analyse étroite. Un taux d'efficacité des contrôles doit se lire avec le suivi des défaillances, car un taux parfait peut venir de tests faibles. Un décompte de constats d'audit doit se lire avec le taux de récurrence et la vérification de la clôture. Un niveau de service d'un fournisseur doit se lire avec l'expérience des utilisateurs (voir le sujet 6.2, Accords de niveau d'expérience). Un chiffre statutaire doit se lire avec ses mesures compagnes et un rapprochement avec la définition interne.

La partie s'appuie sur les précédentes. Les enregistrements d'actifs, de configuration et de coûts (voir le sujet 7.1, Métriques de gestion des actifs informatiques, et le sujet 7.4, Métriques de qualité de la configuration et de la CMDB) rendent possibles l'analyse, la cartographie des dépendances et l'analyse des fournisseurs. Les mesures d'analyse post-incident et de changement de la partie 4 fournissent les boucles d'apprentissage qui gardent ce travail honnête. La partie 9 se tourne vers les personnes qui se trouvent derrière tout cela : leur santé, leur collaboration et les habitudes d'amélioration qui rendent tout le système meilleur avec le temps.