Översikt och motiv

Styrning av mätetal är den uppsättning lättviktiga beslut som gäller vem som äger ett mått, vad det betyder, vem som får se det, hur ofta det granskas och när det tas bort. Det är en nära släkting till datastyrning, som omfattar den bredare hanteringen av datatillgänglighet, datakvalitet och datasäkerhet i en organisation. Styrning av mätetal tillämpar samma disciplin på den lilla, mycket synliga uppsättning siffror som team och ledare använder för att styra tjänste- och leveransarbete.

Behovet visar sig som små, upprepade friktioner. Två team beräknar "lösningstid" olika och lägger ett möte på att jämka siffrorna. En ruta på en instrumentpanel blir inaktuell i månader eftersom personen som byggde den bytte jobb. Ett mått som utformats för att hjälpa ett team att diagnostisera sitt flöde antas av en styrgrupp som prestationsmål, vilket är situationen som det föregående ämnet varnar för (se ämne 1.2, Goodharts lag och mätetalens psykologi). Inget av detta är ett statistiskt problem. Vart och ett är ett ägarskapsproblem, och vart och ett är billigt att förebygga.

Agila och ITIL-baserade synsätt skiljer sig åt i betoning, och skillnaden är användbar. I det agila synsättet äger ett team sina arbetsmått och förhandlar om dem i retrospektiv, arbetsöverenskommelser och granskningar. ITIL-synsättet, så som det dokumenteras i ITIL 4 (2019 års utgåva från AXELOS, numera publicerad av PeopleCert), behandlar mätning och rapportering som en allmän ledningspraktik och ständig förbättring som en praktik med egna roller, poster och granskning. ITIL förväntar sig också att tjänsteägare och praktikägare är ansvariga för resultat. De två synsätten passar ihop: teamet äger arbetsvyn, en namngiven tjänste- eller praktikägare äger den rapporterade vyn, och ett litet register länkar de två.

Några termer som används här. En mätetalsägare är den ansvariga person som svarar för ett mätetals definition, datakvalitet och användning. Ett mätetalsregister är en kort katalog över de mätetal som används, med varje mätetals ägare, definition, datakälla, skyddsräcke och granskningsdatum. En mätetalsstadga är ett enkelsidigt uttalande om syfte, omfattning, roller och granskningsrytm för en uppsättning mätetal. En enda sanningskälla är det enda auktoritativa system eller dataset från vilket en given siffra beräknas. En dataförvaltare ser till kvaliteten och definitionen i en datadomän, och i en liten organisation spelar mätetalsägaren ofta den rollen. En RACI-matris registrerar vem som är ansvarig för genomförandet, vem som har det yttersta ansvaret, vem som konsulteras och vem som informeras för varje aktivitet. Ett datalexikon är en katalog över dataelement och deras betydelser, vilket är vad registrets definitionskolumn blir i större skala. Principen om minsta behörighet säger att människor och system får den åtkomst de behöver för sin uppgift och inte mer. Ständig förbättring är det pågående arbetet med att förbättra tjänster, praktiker och arbetssätt, och det är både en ITIL-praktik och en agil vana. SLA betyder servicenivåavtal och ITSM betyder it-tjänstehantering.

Nyckelprinciper

  • Varje rapporterat mätetal har en namngiven ägare. En roll eller en person, aldrig "teamet." Delat ägarskap lämnar definitionen utan underhåll.
  • En definition, en sanningskälla. Skriv definitionen en gång, inklusive var klockan startar och stoppar, och beräkna siffran på ett ställe.
  • Styr i proportion till konsekvens. Ett mätetal som ett team använder för att felsöka sin egen tavla behöver en mening. Ett mätetal i ett avtal, en offentlig rapport eller ett styrelseunderlag behöver en post i stadgan, granskning och ett revisionsspår.
  • Åtkomst följer syfte. Besluta vem som ser vilken vy och varför. Standardpubliken för ett teams arbetsvy är teamet.
  • Granska i en rytm och avveckla på belägg. Mätetal har livscykler. Inför, granska, revidera och avveckla dem medvetet.
  • Skriv ned det och håll det litet. Ett register som ryms på en sida blir läst. En policyhandbok blir det inte.
  • Styrning tjänar de människor som mäts. Ägarna av ett mätetal inkluderar de människor vars arbete det beskriver.

Mätetalsdefinitioner

Det här är mått på hälsan hos en mätetalspraktik, inte hos en tjänst. De är medvetet få och billiga att samla in från själva registret. Varje period är ett kalenderkvartal om inget annat anges.

Mätetal Definition Formel Enhet Datakälla ITIL-praktik Agil motsvarighet Rytm
Ägarskapstäckning Andel rapporterade mätetal med en namngiven, aktuell ägare rapporterade mätetal med en ägare som fortfarande har rollen vid periodens slut / rapporterade mätetal vid periodens slut; utesluter mätetal som bara används på ett enskilt teams privata tavla procent Mätetalsregister Mätning och rapportering Arbetsöverenskommelser Kvartalsvis
Definitionsaktualitet Andel rapporterade mätetal vars definition granskats inom det överenskomna intervallet mätetal med ett granskningsdatum de senaste 6 månaderna / rapporterade mätetal; klockan startar vid den senast registrerade granskningen och stoppar vid periodens slut procent Ändringslogg i mätetalsregistret Mätning och rapportering; ständig förbättring Åtgärder från retrospektiv Kvartalsvis
Källöverensstämmelse Andel rapporterade mätetal som beräknas från exakt en namngiven källa mätetal med en auktoritativ källa och ingen känd parallell beräkning / rapporterade mätetal; parallella beräkningar hittas genom stickprov av instrumentpaneler och rapporter procent Register samt ett stickprov av instrumentpaneler och rapporter Mätning och rapportering; hantering av servicenivåer Definition av klart för ett mätetal Kvartalsvis
Avvecklingsgrad Antal mätetal som avvecklats eller slagits ihop under en period i förhållande till de som rapporterats mätetal som avvecklats eller slagits ihop under perioden / mätetal som rapporterats vid periodens start; ett mätetal som flyttas till en privat teamvy räknas som avvecklat från den rapporterade uppsättningen procent Ändringslogg i mätetalsregistret Ständig förbättring Åtgärder från retrospektiv Kvartalsvis
Aktualitet i åtkomstgranskning Andel begränsade mätetalsvyer vars målgruppslista granskats inom intervallet begränsade vyer med en målgruppsgranskning de senaste 6 månaderna / begränsade vyer; vyer som är öppna för hela organisationen utesluts procent Åtkomstlista eller export av behörigheter från BI-verktyg Informationssäkerhetshantering; mätning och rapportering Arbetsöverenskommelser Halvårsvis
Beslutskoppling Andel rapporterade mätetal som i registret är kopplade till ett beslut de ger underlag för mätetal med ett registrerat beslut eller en registrerad fråga / rapporterade mätetal; en koppling räknas bara om beslutet fattades de senaste 12 månaderna procent Mätetalsregister och beslutslogg Ständig förbättring Intressentgranskning och förbättringsresultat Kvartalsvis

Inget av dessa är ett mål. Ett register kan visa full ägarskapstäckning och ändå beskriva värdelösa mätetal, så läs tabellen tillsammans med manipulationstabellen nedan.

Rekommendationer

Etablera ägarskap och registret

1. För ett enkelsidigt mätetalsregister. Lista varje rapporterat mätetal med dess fråga, ägare, definition, formel och klockor, enhet, datakälla, målgrupp, skyddsräcke, datum för senaste granskning och planerat granskningsdatum. Ett kalkylblad eller en Markdown-fil i versionshantering räcker. Registret är den enskilt mest användbara artefakten i det här ämnet, och det föregående ämnet förutsätter redan att det finns (se ämne 1.2, Goodharts lag och mätetalens psykologi).

2. Namnge en ägare per mätetal och registrera rollen. Ägaren svarar för definitionen, datakvaliteten och förklaringen av konstiga resultat. Välj någon nära data och besluten, ofta tjänsteägaren, en praktikägare eller en teamledare. Registrera rollen såväl som personen, så att posten överlever ett jobbyte och en vakans syns i täckningssiffran.

3. Skilj ägandet av ett mätetal från ägandet av arbetet det mäter. Ägaren av ett mätetal förklarar och underhåller det, men teamet som gör arbetet förblir ansvarigt för resultatet. Det undviker två fällor: ägaren som får skulden för en siffra hen inte kan påverka, och teamet som förnekar en siffra för att någon annan underhåller den. En kort RACI-tabell i stadgan gör detta uttryckligt.

4. Skriv definitionen med sina klockor, en gång. Registret innehåller den auktoritativa definitionen: vad som räknas, var klockan startar och stoppar, vilka tillstånd som pausar den och vad som utesluts. Länka till den från varje instrumentpanel som visar mätetalet. När en definition behöver ändras, ändra den i registret först och markera ändringen i diagrammet (se ämne 1.6, Statistisk läskunnighet för tjänstemätetal, för hur man visar ett brott i en trend).

5. Beräkna varje mätetal på ett ställe. Välj den auktoritativa källan, till exempel ITSM-verktyget, ärendehanteringssystemet eller övervakningssystemet, och ange det i registret. Parallella kalkylblad som återskapar siffran bör antingen avvecklas eller döpas om så att ingen förväxlar dem med den officiella siffran. Dataursprung och verktyg hör till nästa ämne (se ämne 1.5, Datakällor och instrumentering).

Sätt rytm och ändringskontroll

6. Granska definitioner enligt ett schema som motsvarar konsekvensen. För mätetal i avtal, reglerade rapporter eller ledningsunderlag, granska två gånger per år och vid varje ändring i det underliggande arbetsflödet. För mått på teamnivå är retrospektiven granskningen. Varje granskning ställer tre frågor: är definitionen fortfarande korrekt, är data fortfarande sunda, och använde någon siffran för att besluta något?

7. Behandla definitionsändringar som ändringar av en tjänst. Registrera vem som begärde ändringen, varför, vem som konsulterades och datumet då den träder i kraft. En liten ändring i ett statusarbetsflöde kan i tysthet flytta ett tidsmått mycket. Lättviktig ändringskontroll för definitioner lånar idén från ändringsmöjliggörande utan ceremonin (se ämne 4.3, Mätetal för ändringsmöjliggörande, för motsvarigheten för tjänsteändringar).

8. Knyt granskningen till ständig förbättring. Mätetalsgranskningar bör ge förbättringsarbete, eller ett uttryckligt beslut att inte agera. ITIL behandlar ständig förbättring som en praktik med ett register över förbättringsmöjligheter, och agila team får samma effekt genom åtgärder från retrospektiv. Om en granskning slutar utan åtgärd och utan avveckling, fråga om mätetalet uträttar något (se ämne 9.5, Mätetal för ständig förbättring).

9. Avveckla mätetal medvetet. Definiera ett avvecklingsprov, till exempel "inte åberopat i ett beslut under två granskningscykler", och tillämpa det. Arkivera definitionen och de slutliga värdena, säg vad som ersatte mätetalet om något, och berätta för publiken. En avvecklingslogg är belägg för revisorer och en lättnad för människor som underhållit data för hand.

Styr vyer och åtkomst

10. Besluta publiken för varje vy. De flesta mätetal har en arbetsvy för teamet, en rapporterad vy för tjänsteägaren eller programmet och ibland en extern vy för kunder, en tillsynsmyndighet eller en leverantör. Registrera vilken publik som får vilken vy och varför. Med principen om minsta behörighet som vägledning, begränsa vyer som innehåller personuppgifter, säkerhetsdetaljer eller kommersiellt känsliga leverantörssiffror, och lämna resten öppet så att transparens är standard.

11. Håll data på individnivå utanför rapporteringen. Bokens hårda regel är att mätetal beskriver team, tjänster och system, inte människor. Styrning stöder detta genom att fastställa den rapporterade granulariteten, till exempel team och tjänst, och genom att begränsa varje utdrag på personnivå till dataförvaltaren. Om en begäran om en uppdelning på personnivå kommer in, registrera den, fråga vilket beslut den tjänar och erbjud ett alternativ på team- eller systemnivå (se ämne 11.3, Att införa mätetal utan att skapa rädsla).

Manipuleringsvektorer och skyddsräcken

Mätetal Hur det manipuleras Parat skyddsräcke eller parad praxis
Ägarskapstäckning Att namnge en chef eller en e-postlista som ägare för att nå 100 procent, utan någon som kan förklara eller ändra mätetalet Be varje ägare förklara en nylig rörelse i siffran; följ frågor som förblev obesvarade i mer än en vecka
Definitionsaktualitet Att röra vid granskningsdatumet utan att läsa definitionen Stickprova tre poster varje kvartal och jämför den skrivna definitionen med verktygets faktiska konfiguration
Källöverensstämmelse Att förklara en källa auktoritativ medan kalkylblad fortfarande cirkulerar och går isär Räkna olika siffror för samma mätetal i ett stickprov av rapporter; jämka skillnaderna i granskningen
Avvecklingsgrad Att avveckla triviala eller oanvända mätetal för att se disciplinerad ut, eller döpa om ett mätetal så att det räknas som nytt Granska avvecklingsloggen för vad som togs bort; följ det totala antalet rapporterade och beslutskopplingen bredvid
Aktualitet i åtkomstgranskning Att godkänna den befintliga målgruppslistan utan att läsa den Jämför listan med aktuellt teammedlemskap och roller; redovisa antalet borttagningar som hittades
Beslutskoppling Att skriva ett vagt beslut som "förbättra tjänsten" för att uppfylla fältet Kräv ett daterat beslut eller en fråga, och stickprova beslutsloggen för om mätetalet faktiskt konsulterades

En sund avläsning är ett register som förändras. Posterna har ägare som svarar på frågor, granskningsdatum som ligger inom de senaste sex månaderna, en avvecklingslogg med skäl och en kort lista med mätetal som fortfarande önskas eftersom människor kan namnge beslutet de ger underlag för. Ett register där varje fält är ifyllt och inget någonsin ändras är ett varningstecken.

Avvägningar: för- och nackdelar

Tillvägagångssätt Styrka Svaghet
Centralt mätetalskontor Konsekventa definitioner och delade verktyg; lättare revision Långsamt, avlägset från arbetet och frestat att standardisera mått som borde skilja sig mellan team
Federerat ägarskap med ett delat register Ägare sitter nära data; registret håller en gemensam miniminivå Kräver jämn uppmuntran för att undvika att kvaliteten glider isär mellan team
Enbart teamägda mått Snabbt och passar arbetet Definitioner divergerar; sammanställningar blir otillförlitliga; kunskap försvinner med människor
Öppen åtkomst som standard Skapar förtroende och gemensam förståelse Risk för exponering av känsliga detaljer eller detaljer på personnivå
Begränsad åtkomst Skyddar känsliga data Döljer sammanhang för människor som kunde hjälpa, och inbjuder till misstänksamhet

Balansen är att centralisera det tunna lager som måste vara överens, det vill säga registret, de gemensamma definitionerna och åtkomstreglerna, och att federera allt annat.

Frågor att diskutera med teamet

1. Vem skulle svara om det mest åberopade talet på vår instrumentpanel såg fel ut i morgon? Be gruppen nämna en person, inte en grupp. Om flera namn dyker upp, eller inget, har mätetalet ingen ägare i praktiken. Facilitatorn bör notera mätetalet, kandidatägaren och vad ägaren skulle behöva för att klara uppgiften, till exempel läsbehörighet till data eller tid i granskningen. Avsluta med att enas om vem som bekräftar ägaren och registrerar rollen i registret.

2. Var finns två versioner av samma siffra i dag? Leta efter rapporter som visar samma mätetal med olika värden: en veckobild mot en levande instrumentpanel, eller en leverantörsrapport mot den interna. För var och en, fråga var skillnaden uppstår, till exempel i omfattning, klocka eller undantag. Besluta vilken källa som är auktoritativ och vad som händer med den andra versionen. Räkna med att samtalet avslöjar olika arbetsdefinitioner av ord som alla antog var gemensamma.

3. Vilket mätetal skulle vi avveckla det här kvartalet om vi var tvungna att avveckla ett? Börja med mätetalet som ingen nyligen åberopat i ett beslut. Fråga vad som skulle hända om det försvann, och vem som skulle märka det. Om svaret är "ingen", flytta det ur den rapporterade uppsättningen under en prövoperiod. Facilitatorn bör behandla avveckling som normalt och hälsosamt, och registrera utfallet i avvecklingsloggen.

4. Vem ser vilka av våra mätetal, och är det med avsikt? Rita ett enkelt rutnät med mätetal mot publiker: team, tjänsteägare, ledning, kunder, leverantörer, tillsynsmyndigheter. Markera var åtkomst var ett beslut och var den bara uppstod. Leta efter varje vy som kan användas för att jämföra individer. Enas om en ändring av minst en målgruppslista och om vem som granskar den härnäst.

5. Hur ändrar vi en definition utan att bryta trenden? Gå igenom en nylig ändring av ett statusarbetsflöde eller en prioritetsskala. Fråga vem som fick veta det, om diagrammet kommenterades och om någon jämförde gamla och nya värden. Skriv ett lätt ändringsunderlag som teamet faktiskt skulle fylla i. Enas om vem som godkänner ändringar av mätetal som förekommer i avtal eller externa rapporter.

6. Vad skulle vi sluta göra om styrningen blev en börda? Styrning kan bli en ritual. Fråga vilka delar av nuvarande tillvägagångssätt människor skulle hoppa över om ingen kontrollerade, och varför. Behandla svaren som designåterkoppling snarare än motstånd. Facilitatorn bör leta efter steg som dubblerar varandra, fält som ingen läser och granskningar som aldrig ger ett beslut.

Fyra perspektiv

Produkt- och leveransteam

Leveransteam äger arbetsmått som ålder på arbetsobjekt och cykeltid, och de bör komma överens om definitionerna i sina arbetsöverenskommelser. När ett mätetal flyttas upp till en portföljrapport bör teamet känna till ägaren, definitionen och publiken. Team får mest nytta av en kort registerpost för varje rapporterat mått, och av rätten att ifrågasätta en definition som inte längre passar hur arbetet flödar (se ämne 2.1, Flödesmått).

Service- och driftteam

Service- och driftteam bär de mätetal som förekommer i SLA:er och driftgranskningar, så definitioner, klockor och undantag har avtalsmässig tyngd. Ägarna här är vanligtvis tjänsteägare och praktikägare. De bör föra ett beläggsspår för definitionsändringar, regelbundet stämma av rapporterade siffror mot ITSM-verktyget och vara först med att avveckla ett mått som slutat ge underlag för driftbeslut (se ämne 5.1, Mätetal för SLA, OLA och XLA).

Ledning och styrning

Ledare sätter villkoren: vem som äger mätetal, vilka vyer som når ledningsunderlaget och hur siffrorna används. De bör be om registret och avvecklingsloggen, läsa definitionerna bakom huvudsiffrorna och motstå begäran om resultattabeller på personnivå. Styrande organ behöver en liten stående punkt som granskar registret och registrerar beslut, i linje med förväntningarna i ISO/IEC 20000-1 på ledningssystem för tjänstehantering (enligt 2018 års utgåva) utan att göra granskningen till en regelefterlevnadsövning (se ämne 8.3, Mätetal för regelefterlevnad och revision).

Kunder och användare

Kunder och användare ser sällan registret, men de känner av dess frånvaro när en siffra i en tjänstegranskning skiljer sig från deras upplevelse. Där ett mätetal förekommer i en kundvänd rapport eller ett SLA bör definitionen vara tillgänglig på vanligt språk, inklusive vad som utesluts. Kunder bör ha en väg att ifrågasätta en siffra, och ägaren bör svara på den (se ämne 5.1, Mätetal för SLA, OLA och XLA).

I praktiken: ett exempel från tjänstehantering

En medelstor nätbutik driver en servicedesk, tre produktteam och en driftgrupp. Alla siffror nedan är illustrativa.

Den månatliga tjänstegranskningen visar en incidentlösningstid på 5,1 timmar för medianen. Produktteamens egen instrumentpanel, byggd från samma ITSM-verktyg, visar 6,4 timmar. De två siffrorna har cirkulerat i ett år. En ny tjänsteägare frågar vem som äger mätetalet och får tre olika svar.

Ägaren lägger tillsammans med teamledarna och dataförvaltaren två sessioner på ett första register med 14 rapporterade mätetal. Av dem saknade 5 ägare och 4 hade två källor. Lösningstid är ett av mätetalen med dubbla källor. Skillnaden går tillbaka på ett pausläge: tjänstegranskningen utesluter tid i "väntar på kund" och teamets instrumentpanel gör det inte. Gruppen enas om en definition, namnger tjänsteägaren som mätetalsägare och publicerar båda värdena på samma sida under ett kvartal, märkta efter definition, så att ingen förlorar historiken. De kommenterar diagrammet där definitionen ändras.

Vid den första kvartalsgranskningen tillämpar gruppen ett avvecklingsprov och tar bort 3 av de 14 mätetalen, däribland ett månatligt diagram över ärendeantal som inget nyligt beslut hade åberopat. De begränsar också vyn som delar upp lösningstid per analytiker, med dataförvaltaren som enda innehavare, och de erbjuder en uppdelning på teamnivå i stället.

En manipulationsrisk dyker upp vid den andra granskningen. Ägarskapstäckningen når 100 procent, men ett stickprov visar att två av ägarna är en e-postlista och en avdelningschef som aldrig har öppnat data. Gruppen ersätter dem med namngivna tjänsteägare och lägger till skyddsräckesfrågan i granskningen: "Kan ägaren förklara den senaste rörelsen i den här siffran?" Täckningen sjunker till 86 procent under ett kvartal, vilket gruppen registrerar som ett ärligt resultat. Det loggade beslutet är att vänta med målet för täckning tills skyddsräcket har körts i två cykler.

Agilitet, AI, automatisering och analys

Agilitet

Behandla mätetalsregistret som ett levande dokument som teamet uppdaterar när det lär sig något, inte som en engångsdesignövning. En praktisk vana är en kort regelbunden granskning där mätetalsägaren, teamet och en intressent enas om vilka mätetal som stannar, ändras eller avvecklas. Varningen är att täta små ändringar kan bryta trender, så logga varje ändring med ett skäl.

AI

Mätetal om AI-system behöver en ägare precis som tjänstemätetal, och ägaren behöver befogenhet att pausa systemet när siffrorna säger att det skadar användarna. Registrera i registret vilka mätetal som beskriver AI-stött arbete och vem som granskar deras kvalitetspar. Varningen är att leverantörsframtagna AI-instrumentpaneler har sina egna definitioner, så registrera dem med leverantörens definition citerad och kontrollerad.

Automatisering

Automatisera registerhygienen: flagga mätetal utan ägare, utan granskningsdatum eller utan nyligt åberopande i ett beslut, och varna ägaren. Varningen är att en automatisk påminnelse som ingen svarar på är brus, så mät hur många flaggor som leder till åtgärd och avveckla dem som inte gör det.

Analys

Behandla åtkomst till mätetalsdata som en styrningsfråga också: vem som kan se data på teamnivå, vem som kan se råa ärenden och hur länge data sparas. Beslutet som registret ger underlag för är vad som ska behållas, ändras eller avvecklas. Varningen är att analys av människors beteende kan glida över i övervakning, så håll mätetalen på team- och tjänstenivå och kontrollera de integritetsregler som gäller för dig.

Branschperspektiv

Startup. En grundare eller ledande ingenjör äger ofta varje mätetal som standard. Risken är att definitionerna lever i ett enda huvud. För ett register med fem till åtta mätetal i ett delat dokument, namnge en ägare för varje och skriv definitionerna samma dag som ett mätetal först förekommer i en investerar- eller kunduppdatering.

Småföretag. Personen som sköter it är vanligtvis ägare, förvaltare och rapportläsare. Håll styrningen till en enda sida, granska två gånger per år och var extra noga när en leverantörsframtagen rapport definierar ett mätetal annorlunda än ditt eget. Namnge vem i verksamheten som äger varje kundvänd siffra.

Storföretag. Skala gör det delade lagret nödvändigt. Använd ett register med arbetsflöde, ett lättviktigt råd som möts kvartalsvis och en roll som dataförvaltare för varje större domän. Bevara teamens autonomi för arbetsmått och skydda mot att standardisera mätetal som borde skilja sig mellan olika slags tjänster. Att anpassa sig till den datastyrning som redan finns i organisationen sparar möda.

Offentlig sektor. Lagstadgad rapportering, revision och upphandling gör skrivna definitioner och ändringsposter till en skyldighet. Behandla registret som en revisionsartefakt och håll en tydlig linje från varje publicerad siffra till dess ägare och källa. Åtkomstbeslut involverar ofta juridisk granskning och integritetsgranskning, så registrera grunden för varje begränsad vy (se ämne 8.5, Reglerad och statlig rapportering).

Affärscase: motiv, ROI och TCO

Kostnaden är måttlig och mestadels tid. Räkna med några timmar för att bygga ett första register, en eller två timmar per kvartal för granskningen och en del möda från dataförvaltaren för att reda ut motstridiga källor. Verktygskostnaderna är låga eftersom ett kalkylblad eller en versionshanterad fil räcker för att börja.

Avkastningen är mestadels undviket slöseri. Möten som läggs på att jämka siffror försvinner, revisioner hittar ett tydligt spår, och det går snabbare att introducera en ny tjänsteägare eftersom definitionerna är nedskrivna. Beslut blir bättre eftersom de vilar på siffror som betyder detsamma varje månad. Ange inte en procentsats för dessa nyttor utan egna data. Om du behöver siffror till ett affärscase, räkna timmarna som förra kvartalet lades på att jämka motstridiga siffror och antalet mätetal utan registrerad ägare, och räkna dem igen efter två granskningscykler.

Antimönster och fallgropar

  • Ägarskap genom kommitté. En grupp äger mätetalet och ingen svarar på frågor. Namnge en ansvarig roll och en ställföreträdare.
  • Registret som kyrkogård. Det byggs en gång och rörs aldrig. Lägg granskningsdatum i kalendern och visa datumet på varje instrumentpanel.
  • Att standardisera allt. En definition som påtvingas team vars arbete skiljer sig ger siffror som inte betyder något någonstans. Dela bara det lager som måste vara överens.
  • Tysta definitionsändringar. Trender bryts och förtroendet följer. Logga varje ändring med skälet och kommentera diagrammet.
  • Styrning utan avveckling. Uppsättningen växer bara och uppmärksamheten tunnas ut. Tillämpa ett avvecklingsprov vid varje granskning.
  • Sekretess som standard. Att dölja arbetsvyer för de människor som mäts föder misstänksamhet. Begränsa bara det som bär verklig risk och förklara varför.
  • Öppen åtkomst till data på personnivå. Ett enda utdrag kan bli en resultattabell inom dagar. Sätt den rapporterade granulariteten till team och tjänst, och håll all data på personnivå hos förvaltaren.
  • Regelefterlevnadsteater. Fält fylls i för att uppfylla en checklista. Stickprova poster för sanningshalt och be ägarna förklara nyliga rörelser.

Mognadsmodell

Dimension 1 Initiera 2 Utveckla 3 Standardisera 4 Styra 5 Orkestrera
Ägarskap och register Oklara ägare; mätetal lever i individuella kalkylblad Vissa team för en lista med ägare Ett register för alla rapporterade mätetal, vart och ett med en namngiven ägare och roll Täckning och aktualitet följs över tid; luckor leder till resurssatta åtgärder Registret delas med leverantörer och kunder där siffror korsar gränser
Definitioner och ändringskontroll Definitioner skiljer sig mellan personer Skrivna för vissa avtalsmätetal Skriven definition med klockor och en ändringslogg för varje rapporterat mätetal Ändringar granskas för påverkan på trender före release Definitioner revideras gemensamt över team och leverantörer när de slutar ge underlag för beslut
Granskning och avveckling Mätetal läggs till, tas aldrig bort Enstaka uppstädning Granskningsrytm och avvecklingsprov nedskrivna Granskningsresultat följs som förbättringsarbete Avveckling och förnyelse är rutin, driven av belägg från användare och team
Åtkomst och publik Åtkomst av en slump Begränsade vyer för känsliga data Publik listad per mätetal, med ett skäl Åtkomst granskas i en rytm; data på personnivå hålls av förvaltaren Publiken utformas tillsammans med de som mäts och med kunder

Checklista

  • Ett mätetalsregister finns och listar varje rapporterat mätetal.
  • Varje rapporterat mätetal har en namngiven ägare och en registrerad roll.
  • Varje rapporterat mätetal har en skriven definition med start-, stopp- och undantagsregler.
  • Varje mätetal har en auktoritativ källa angiven i registret.
  • Ett granskningsdatum och ett intervall är registrerade för varje mätetal.
  • Definitionsändringar loggas med ett skäl och markeras i diagrammet.
  • Ett avvecklingsprov är nedskrivet och tillämpas vid varje granskning.
  • Publiken för varje vy är registrerad, med ett skäl för varje begränsning.
  • Ingen rapporterad vy rangordnar individer, och data på personnivå finns hos dataförvaltaren.
  • Registret har stickprovats för sanningshalt det senaste kvartalet.

AI-prompter

Skriv ett utkast till en mätetalsstadga för en mätetalsuppsättning.

Draft a one-page metrics charter for [team or service name], which provides
[type of service or delivery work]. The metric set is: [list of metrics]. The
audiences are [audiences]. Include purpose, explicit non-goals, a RACI table for
owner, data steward, and reviewers using these roles: [roles], review cadence,
and a retirement test. Base the draft only on what I have written. Do not invent
metrics, targets, or benchmark values. List your assumptions and the questions I
should answer to complete the charter.

Hitta konflikter mellan två versioner av ett mätetal.

Here are two descriptions of what should be the same metric, [metric name].
Version A, from [source A]: [description and formula]. Version B, from
[source B]: [description and formula]. Compare them on what is counted, where
the clock starts and stops, which states pause it, and what is excluded.
Explain which differences could account for the gap between [value A] and
[value B], and suggest questions for the owner. Do not guess at values I have not
given. List your assumptions and what you could not determine.

Granska ett mätetalsregister efter luckor.

Below is an extract of our metric register with fields [list fields]. Review it
for missing owners, entries with no review date or one older than [interval],
metrics with more than one source, metrics with no linked decision, and views
that could expose person-level data. Report patterns by metric, not by
individual. Do not invent facts about our metrics. Tell me which findings are
certain from the text and which are guesses, and list your assumptions.

[paste register extract, with personal data removed]

Planera en avvecklingsgranskning.

We review metrics every [interval]. Our retirement test is: [test]. For each of
the metrics below, using the notes I supply, propose retire, keep, merge, or
redesign, with a one-line reason and a question to ask the owner: [metrics with
last-cited date and owner role]. Also suggest how to announce each retirement to
[audience]. Do not invent usage data. List your assumptions and any information
that would change your recommendation.

AI-färdigheter

Viktigaste slutsatser

  • Styrning håller siffror betydande på samma sätt över tid, och ett enkelsidigt register är kärnan i den.
  • Namnge en ansvarig ägare för varje rapporterat mätetal och registrera rollen såväl som personen.
  • Skriv en definition med sina klockor, beräkna den på ett ställe och logga varje ändring.
  • Anpassa styrningens tyngd efter mätetalets konsekvens.
  • Besluta med avsikt vem som ser vilken vy, håll data på personnivå utanför rapporteringen och avveckla mätetal på belägg.

Referenser och vidare läsning

  1. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  2. Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997.
  3. Muller, J. Z., The Tyranny of Metrics, Princeton University Press, 2018.
  4. DAMA International, DAMA-DMBOK: Data Management Body of Knowledge, 2nd edition, Technics Publications, 2017.
  5. AXELOS, ITIL Foundation: ITIL 4 Edition, TSO, 2019. Summarized, not reproduced.
  6. ISO/IEC 20000-1:2018, Information technology, Service management, Part 1: Service management system requirements, International Organization for Standardization.
  7. Wikipedia, Data governance.
  8. Wikipedia, Single source of truth.
  9. Wikipedia, Data steward.
  10. Wikipedia, RACI matrix.
  11. Wikipedia, Data dictionary.
  12. Wikipedia, Principle of least privilege.
  13. Wikipedia, Continual improvement process.