सेवा प्रबंधन को क्यों मापें
सेवाएँ बनाने और चलाने वाली टीमों को थोड़ी-सी ईमानदार संख्याएँ चाहिए ताकि वे देख सकें कि उनका काम उपयोगकर्ताओं की मदद कर रहा है और बेहतर हो रहा है, और इस तस्वीर का एक-एक आधा हिस्सा एजाइल और ITIL देते हैं।
अवलोकन और प्रेरणा
सेवा बनाने और चलाने वाली हर टीम दिन भर निर्णय लेती है: आगे किस पर काम करें, रिलीज़ सुरक्षित है या नहीं, सर्विस डेस्क को एक और व्यक्ति चाहिए या नहीं, कोई आउटेज एक बार की बात थी या एक पैटर्न। मापन के बिना ये निर्णय स्मृति, किस्सों और सबसे अंत में बोलने वाले पर टिके रहते हैं। गलत मापन के साथ ये उससे भी बदतर हो सकते हैं, क्योंकि संख्या में वह अधिकार होता है जो राय में नहीं होता। यह विषय समझाता है कि मापने की मेहनत क्यों सार्थक है, प्रत्येक परंपरा क्या योगदान देती है, और गलत करने की क्या कीमत चुकानी पड़ती है।
इस पुस्तक में दो परंपराएँ मिलती हैं। एजाइल सॉफ़्टवेयर विकास (Agile software development) मूल्यों और प्रथाओं का एक समूह है, जो 2001 के एजाइल मैनिफ़ेस्टो में कहा गया है और जो चालू सॉफ़्टवेयर, ग्राहकों के साथ निकट सहयोग तथा बदलाव के प्रति प्रतिक्रिया को वरीयता देता है। इसकी मापन-आदतें अनुभवजन्य और स्थानीय हैं: टीम अपने ही प्रवाह की जाँच करती है, देखती है कि उसने क्या पहुँचाया, और अनुकूलन करती है। ITIL, जो मूलतः Information Technology Infrastructure Library था, IT सेवा प्रबंधन (ITSM) का मार्गदर्शन-समूह है, यानी IT सेवाओं को डिज़ाइन करने, पहुँचाने और सुधारने का अभ्यास। इसकी मापन-आदतें सेवा-उन्मुख और साझा हैं: सहमत सेवा-स्तर, सेवाओं का कैटलॉग (ITIL की अपनी वर्तनी "service catalogue" है) और सतत सुधार का अनुशासन। ITIL 4 में, जो ढाँचे का 2019 का संस्करण है, मापन और रिपोर्टिंग सामान्य प्रबंधन प्रैक्टिसेस में से एक है, और सतत सुधार एक प्रैक्टिस भी है और मार्गदर्शक सिद्धांत भी। संस्करण के ब्योरों पर भरोसा करने से पहले ढाँचे के स्वामी के वर्तमान प्रकाशन देखें, क्योंकि ढाँचा विकसित होता रहता है।
दोनों दृष्टिकोण उपयोगी ढंग से भिन्न हैं। एजाइल पूछता है, "क्या हम सही चीज़ बना रहे हैं, और काम कितनी सहजता से बह रहा है?" ITIL पूछता है, "क्या सेवा अपने उपयोगकर्ताओं की ज़रूरतें पूरी कर रही है, और क्या वह भरोसेमंद, सहायता-योग्य और किफ़ायती है?" जो टीम केवल प्रवाह मापती है, वह ऐसी सेवा में तेज़ी से शिप कर सकती है जिसे उपयोगकर्ता अविश्वसनीय पाते हैं। जो टीम केवल सेवा-स्तर मापती है, वह हर लक्ष्य पूरा कर सकती है, फिर भी परिवर्तन इतनी धीमी गति से पहुँचा सकती है कि सेवा प्रासंगिक ही न रहे। DevOps आंदोलन इस अवलोकन से उपजा कि बनाना और चलाना एक ही प्रणाली है, इसलिए उसका वर्णन करने वाली संख्याएँ साथ-साथ पढ़ी जानी चाहिए। साइट रिलायबिलिटी इंजीनियरिंग (Site reliability engineering, SRE), वह अनुशासन जिसे Google ने अपनी प्रकाशित पुस्तकों में बताया, विश्वसनीयता के लक्ष्यों और परिवर्तन की गति के बीच एक स्पष्ट कड़ी जोड़ता है।
तीन शब्द पूरी पुस्तक में बार-बार आते हैं। माप (measure) काम या सेवा के बारे में कुछ बताता है। मीट्रिक ऐसा माप है जिसका सूत्र, इकाई और डेटा स्रोत परिभाषित हो, ताकि उसे गिनने वाले दो लोगों को वही उत्तर मिले। सुरक्षा-रेखा (guardrail) पहले से चुना गया दूसरा माप या प्रथा है जो तब हिल जाती है जब पहले माप के साथ गेमिंग हो रही हो। सुरक्षा-रेखाओं के पीछे की चेतावनी गुडहार्ट का नियम (Goodhart's law) है: जब कोई माप लक्ष्य बन जाता है, तो लोग काम की जगह संख्या को साधने लगते हैं (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)।
मापन किसलिए है
मापन तब अपनी जगह कमाता है जब वह चार कामों में से एक करता है।
- देखना। अदृश्य काम को दृश्य बनाना: वह कतार जिसे कोई नहीं देखता, तीन टीमों में फैला घटनाओं का पैटर्न, वह परिवर्तन जो एक स्लॉट के लिए नौ दिन इंतज़ार करता है।
- निर्णय लेना। दो विकल्पों के बीच चुनाव को सूचित करना, जैसे किसी अनुरोध-प्रकार को स्वचालित करना है या उसे पैदा करने वाली खामी को ठीक करना है।
- सीखना। किसी धारणा को परखना। यदि टीम मानती है कि नई रिव्यू प्रथा पुनर्कार्य घटाएगी, तो संख्या बता सकती है कि घटाई या नहीं।
- हिसाब देना। उपयोगकर्ताओं, ग्राहकों और नेताओं को इस बात का ईमानदार हिसाब देना कि सेवा क्या पहुँचाती है, ताकि भरोसा प्रमाण पर टिके।
जो संख्या इन चारों में से कोई काम नहीं करती, वह अतिरिक्त बोझ है। आगामी विषय हर मीट्रिक-परिवार के लिए यही कसौटी दोहराते हैं।
कुछ न मापने की कीमत
जो टीम कुछ नहीं मापती, वह संख्याओं से मुक्त नहीं होती। वह अव्यक्त संख्याओं पर चलती है: सबसे ऊँची शिकायत, सबसे हालिया आउटेज, प्रबंधक का यह अंदाज़ा कि लोग कितने व्यस्त दिखते हैं। इसके दो नतीजे होते हैं।
- धीमी प्रतिक्रिया। जिन समस्याओं को कोई रुझान जल्दी दिखा देता, वे अचानक आ धमकती हैं। दोबारा संपर्कों में धीरे-धीरे आती बढ़ोतरी तब तक बुरी किस्मत लगती है जब तक वह संकट न बन जाए।
- सुधार का कोई आधार नहीं। टीम बता नहीं सकती कि किसी बदलाव से मदद मिली या नहीं, इसलिए वह सीख नहीं सकती कि कौन-से बदलाव दोहराने हैं।
गलत चीज़ें मापने की कीमत
गलत चीज़ें मापना अक्सर कुछ न मापने से भी बुरा होता है, क्योंकि वह झूठे आत्मविश्वास के साथ प्रयास को दिशा देता है। बंद किए गए टिकटों की गिनती, कोड की पंक्तियाँ, पूरे किए गए स्टोरी पॉइंट और लॉग किए गए घंटे इकट्ठा करने और चार्ट बनाने में आसान हैं, और हर एक गतिविधि का माप है, उपयोगकर्ता के लिए मूल्य का नहीं। SPACE ढाँचे के पीछे का शोध (Forsgren और सहयोगी, 2021) तर्क देता है कि उत्पादकता को एक आयाम में नहीं पकड़ा जा सकता, और अकेले इस्तेमाल की गई गतिविधि की गिनती भ्रमित करती है।
मुख्य सिद्धांत
- निर्णय के लिए मापें। हर मीट्रिक एक लिखित प्रश्न का उत्तर देती है और एक नामित चुनाव को सूचित करती है। यदि कोई नहीं बता सकता कि कौन-सा, तो उसे समाप्त करें।
- दोनों दृष्टिकोण जोड़ें। डिलीवरी का प्रवाह और सेवा का स्वास्थ्य एक ही पन्ने पर पढ़ें, ताकि गति कभी स्थिरता की कीमत पर, या स्थिरता गति की कीमत पर, न खरीदी जाए।
- पहले परिणाम मापें, फिर गतिविधि। कसौटी यह है कि उपयोगकर्ता बेहतर स्थिति में हैं। गतिविधि की गिनती कहानी का साथ देती है, उसे कहती नहीं (देखें विषय 1.3, उत्पादन से ऊपर परिणाम: क्या मापें, यह चुनना)।
- टीमों और सेवाओं का वर्णन करें, व्यक्तियों का कभी नहीं। व्यक्तिगत क्रम डेटा को बिगाड़ते हैं और सहयोग को नुकसान पहुँचाते हैं।
- छोटे से शुरू करें और बढ़ें। मुट्ठी भर भरोसेमंद मीट्रिक्स कमज़ोर शासन वाली दीवार भर मीट्रिक्स से बेहतर हैं।
- पहले टीम को दिखाएँ। काम करने वाले लोग पहले श्रोता हैं, और डेटा सही है या नहीं, इसकी सबसे अच्छी जाँच भी वही हैं।
- बदलाव की अपेक्षा रखें। परिभाषाएँ, मीट्रिक्स और लक्ष्य तब संशोधित होते हैं जब वे निर्णयों को सूचित करना बंद कर दें।
मीट्रिक परिभाषाएँ
नीचे की मीट्रिक्स स्वयं मापन-अभ्यास के स्वास्थ्य का वर्णन करती हैं, जहाँ "क्यों मापें" परखने योग्य बनता है। जो टीम इन्हें दिखा सकती है, वह कारणों के साथ माप रही है। समय-आधारित या गिनती-आधारित हर सूत्र अपनी सीमाएँ बताता है।
| मीट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL प्रैक्टिस | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| निर्णय से जुड़ी मीट्रिक का हिस्सा | रिपोर्ट की गई उन मीट्रिक्स का हिस्सा जिनका एक लिखित प्रश्न और एक नामित निर्णय है जिसे वे सूचित करती हैं | दर्ज प्रश्न और निर्णय वाली मीट्रिक्स / तिमाही के अंत में डैशबोर्ड पर रिपोर्ट की गई मीट्रिक्स | प्रतिशत | मीट्रिक रजिस्टर (देखें विषय 1.4, मीट्रिक्स का शासन और स्वामित्व) | मापन और रिपोर्टिंग; सतत सुधार | रेट्रोस्पेक्टिव की कार्रवाइयाँ; कार्य-समझौते | तिमाही |
| बेसलाइन कवरेज | दायरे की उन सेवाओं और टीमों का हिस्सा जिनके पास सहमत मुख्य मापों में से हर एक का दर्ज प्रारंभिक मान है | पिछले 12 महीनों में दर्ज बेसलाइन वाले सेवा-और-माप जोड़े / दायरे के सभी सेवा-और-माप जोड़े; कैटलॉग से बाहर की सेवाएँ शामिल नहीं | प्रतिशत | सेवा कैटलॉग और मीट्रिक रजिस्टर | सेवा-स्तर प्रबंधन; मापन और रिपोर्टिंग | हितधारक समीक्षा; टीम डैशबोर्ड | तिमाही |
| मापन का प्रयास | मीट्रिक्स को हाथ से इकट्ठा करने, साफ़ करने और रिपोर्ट करने में लगा स्टाफ़ का समय | महीने में मैन्युअल संग्रह और रिपोर्टिंग के लिए लॉग किए गए घंटे, निष्कर्षों पर कार्रवाई में लगा समय छोड़कर | घंटे प्रति टीम प्रति माह | समय-नोट्स या छोटा टीम सर्वेक्षण | मापन और रिपोर्टिंग | रेट्रोस्पेक्टिव का समय-बजट | तिमाही |
| समीक्षा के समय डेटा की उम्र | जब समूह चर्चा के लिए मिलता है तब सबसे नया डेटा-बिंदु कितना पुराना है | समीक्षा बैठक का टाइमस्टैम्प घटा डैशबोर्ड पर नवीनतम डेटा-बिंदु का टाइमस्टैम्प; प्रति मीट्रिक गणना, माध्यिका और 85वें पर्सेंटाइल के रूप में रिपोर्ट | दिन | डैशबोर्ड रिफ़्रेश लॉग | मापन और रिपोर्टिंग | हितधारक समीक्षा | प्रति समीक्षा |
| सुधार पर अनुवर्तन | मीट्रिक समीक्षाओं से उठाई गई उन सुधार-कार्रवाइयों का हिस्सा जो सहमत अवधि में पूरी हुईं या सोच-समझकर बंद की गईं | कार्रवाई उठाए जाने के 90 दिन के भीतर कारण सहित पूरी या बंद की गई कार्रवाइयाँ / अवधि में उठाई गई कार्रवाइयाँ, सुधार रजिस्टर में लॉग की तारीख़ से गिनी गईं | प्रतिशत | सतत सुधार रजिस्टर या बैकलॉग | सतत सुधार | रेट्रोस्पेक्टिव के कार्य-बिंदु | तिमाही |
मापन का प्रयास जानबूझकर केवल मैन्युअल काम गिनता है। डेटा पढ़ने और क्या करना है यह तय करने में लगा समय ही इस पूरी कवायद का उद्देश्य है और बाहर रखा गया है, ताकि संग्रह को स्वचालित करना प्रगति के रूप में दिखे।
सिफ़ारिशें
उद्देश्य से शुरू करें
1. मीट्रिक से पहले कारण लिखें। प्रस्तावित हर माप के लिए एक वाक्य लिखें: "हम X को Y तय करने के लिए मापते हैं।" यदि वाक्य नहीं लिखा जा सकता, तो माप तैयार नहीं है। यह अकेली आदत अधिकांश दिखावटी मीट्रिक्स को डैशबोर्ड में आने से पहले ही हटा देती है।
2. श्रोता और निर्णय का नाम लिखें। वही संख्या टीम, सेवा स्वामी और कार्यकारी के लिए अलग अर्थ रखती है। लिख लें कि उसे कौन पढ़ेगा और वह किस चुनाव का समर्थन करती है। टीम के कार्य-दृश्य में बीस माप हो सकते हैं। नेतृत्व तक जो जाए, वह छोटा और स्थिर समूह होना चाहिए (देखें विषय 11.1, सेवा मीट्रिक्स डैशबोर्ड की रूपरेखा)।
दोनों परंपराओं का उपयोग करें
3. प्रवाह के माप को सेवा के माप के साथ जोड़ें। कम से कम एक ऐसा माप चुनें जो बताए कि काम कैसे चलता है, जैसे लीड टाइम या कार्य-आइटम की आयु (देखें विषय 2.2, लीड टाइम, साइकल टाइम और प्रवाह दक्षता), और कम से कम एक ऐसा माप जो बताए कि सेवा कैसा बर्ताव करती है, जैसे घटना की पुनरावृत्ति या सेवा-स्तर संकेतक (देखें विषय 5.2, SLI, SLO और त्रुटि बजट)। इन्हें साथ दिखाने से वह आम विफलता रुकती है जिसमें गति और स्थिरता को अलग-अलग समूह अलग-अलग चार्ट देखकर संभालते हैं।
4. डिलीवरी और संचालन को एक प्रणाली मानें। Accelerate (Forsgren, Humble और Kim, 2018) में संक्षेपित शोध बताता है कि सॉफ़्टवेयर डिलीवरी के प्रदर्शन को चार मापों से बताया जा सकता है जो थ्रूपुट और स्थिरता को संतुलित करते हैं। टीम जो भी समूह अपनाए, परिवर्तन-संबंधी और घटना-संबंधी संख्याओं को इतना पास रखें कि एक का बढ़ना दूसरी को देखने को प्रेरित करे (देखें विषय 2.8, DORA मीट्रिक्स)।
ईमानदारी से मापें
5. थोड़े-से ऐसे माप चुनें जो एक-दूसरे के विरुद्ध खिंचते हैं। अकेली संख्या अति-अनुकूलन को न्योता देती है, इसलिए गति के साथ गुणवत्ता, मात्रा के साथ परिणाम, और लागत के साथ अनुभव जैसे जोड़े चुनें। जोड़े का सूत्र होना ज़रूरी नहीं। उसका एक ही पन्ने पर होना ज़रूरी है।
6. कुछ बदलने से पहले बेसलाइन दर्ज करें। प्रारंभिक मान के बिना सुधार का दावा एक कहानी है। पहले कुछ हफ़्तों का डेटा लें, जिसमें औसत के साथ मानों का फैलाव भी हो (देखें विषय 1.6, सेवा मीट्रिक्स के लिए सांख्यिकीय साक्षरता)। बेसलाइन टीमों की रक्षा भी करती हैं: वे दिखाती हैं कि बुरी तिमाही प्रदर्शन में गिरावट के बाद नहीं, बल्कि काम गिनने के तरीके में बदलाव के बाद आई।
आदत बनाएँ
7. निर्णय से मेल खाती लय में समीक्षा करें। प्रवाह के माप साप्ताहिक बातचीत के लिए, या निरंतर सॉफ़्टवेयर डिलीवरी के हर चरण पर होने वाली बातचीत के लिए, उपयुक्त हैं। सेवा-स्तर और लागत के माप मासिक या तिमाही बातचीत के लिए उपयुक्त हैं। गलत लय पर समीक्षित मीट्रिक या तो शोर पैदा करती है या वह क्षण चूक जाती है जब कार्रवाई मददगार होती।
8. सुधार के काम से चक्र बंद करें। जो समीक्षा "दिलचस्प" पर खत्म होती है, उसने अपना डेटा व्यर्थ कर दिया। हर समीक्षा को एक या दो नामित कार्रवाइयों, एक स्वामी और एक तारीख़ पर खत्म करें, और उनके पूरा होने को ट्रैक करें। ITIL की सतत सुधार प्रैक्टिस और एजाइल रेट्रोस्पेक्टिव एक ही अनुशासन के दो नाम हैं (देखें विषय 9.5, सतत सुधार मीट्रिक्स)।
9. बताएँ कि आप संख्याओं का उपयोग किस लिए नहीं करेंगे। साफ़ कहें कि टीम की मीट्रिक्स का उपयोग व्यक्तियों को क्रमबद्ध करने या पुरस्कृत करने के लिए नहीं होगा, और परिभाषाएँ खुले तौर पर बदली जाएँगी। जब लोगों को भरोसा होता है कि मापन का उपयोग कैसे होगा, तब वे उसमें सहयोग करते हैं (देखें विषय 11.3, भय पैदा किए बिना मीट्रिक्स लागू करना)।
गेमिंग के रास्ते और सुरक्षा-रेखाएँ
मापन के बारे में मीट्रिक्स के साथ भी गेमिंग हो सकती है। नीचे की हर पंक्ति मीट्रिक को उसके सामान्य मोड़े जाने के तरीके और उस जाँच के साथ जोड़ती है जो उसे उजागर करेगी।
| मीट्रिक | गेमिंग कैसे होती है | जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा |
|---|---|---|
| निर्णय से जुड़ी मीट्रिक का हिस्सा | प्रतिशत बढ़ाने के लिए हर मीट्रिक के लिए बाद में कोई विश्वसनीय-सा प्रश्न और निर्णय लिख देना | निर्णय लॉग का नमूना लें: पूछें कि मीट्रिक के कारण क्या बदला, और प्रविष्टि लिखे जाने की तारीख़ को मीट्रिक के पहली बार दिखने की तारीख़ से मिलाएँ |
| बेसलाइन कवरेज | बेसलाइन एक बार दर्ज करके कभी ताज़ा न करना, या कोई सुविधाजनक शांत अवधि चुनना | हर बेसलाइन के साथ तारीख़ की सीमा और नमूने का आकार अनिवार्य करें; सेवा में बड़े बदलावों के बाद बेसलाइन की समीक्षा करें |
| मापन का प्रयास | संग्रह का काम बिना लॉग किए करके, या आपूर्तिकर्ता पर खिसकाकर बहीखाते से बाहर कर देना | एक छोटे सर्वेक्षण से तुलना करें कि लोग कहते हैं रिपोर्टिंग में कितना समय लगता है; समीक्षा में आपूर्तिकर्ता का प्रयास शामिल करें |
| समीक्षा के समय डेटा की उम्र | बैठक से ठीक पहले डैशबोर्ड ताज़ा करना जबकि अंतर्निहित रिकॉर्ड अब भी पुराने हैं | रिफ़्रेश के समय के साथ-साथ स्रोत प्रणाली में सबसे नए रिकॉर्ड की उम्र भी रिपोर्ट करें |
| सुधार पर अनुवर्तन | प्रतिशत पाने के लिए कार्रवाइयों को "अब प्रासंगिक नहीं" कारण से बंद करना, या कार्रवाइयों को तुच्छ टुकड़ों में बाँट देना | हर तिमाही बंद कार्रवाइयों के दिए गए कारणों की समीक्षा करें, और देखें कि कार्रवाई जिस माप को लक्ष्य बना रही थी वह हिला या नहीं |
स्वस्थ पठन वह अभ्यास है जो स्पष्ट रूप से जीवित है। मीट्रिक्स लिखित कारणों से रजिस्टर में आती और जाती हैं, बेसलाइन ताज़ा हैं, समीक्षाओं की कार्रवाइयाँ पूरी होती हैं या ईमानदारी से छोड़ी जाती हैं, और टीम डेटा इकट्ठा करने से ज़्यादा समय उस पर कार्रवाई करने में लगाती है। हर पंक्ति पर पूर्ण अंक अंतर्निहित रिकॉर्ड का नमूना लेने का संकेत है, जश्न मनाने का कारण नहीं।
समझौते: लाभ और हानि
| चुनाव | मज़बूती | कमज़ोरी |
|---|---|---|
| कम मापें | कम लागत; गेमिंग का कम जोखिम; उच्च भरोसा | अंधे धब्बे; निर्णय किस्सों पर टिकते हैं |
| बहुत मापें | व्यापक कवरेज; कई मोर्चों पर शुरुआती चेतावनी | ध्यान बिखर जाता है; शासन पतला रहता है; संग्रह की लागत बढ़ती है |
| जोड़ा हुआ दृश्य | गति और स्थिरता को संतुलित करता है; साझा स्वामित्व का समर्थन करता है | टीमों के बीच सहमत परिभाषाएँ और देखने की एक साझा जगह चाहिए |
| मीट्रिक्स पर लक्ष्य | दिशा और तात्कालिकता देता है | गेमिंग को न्योता देता है; जोड़ीदार सुरक्षा-रेखा चाहिए |
| लक्ष्य के बिना मीट्रिक्स | ईमानदार चर्चा को प्रोत्साहित करती हैं | ऐसी रिपोर्टों में बदल सकती हैं जिन पर कोई कार्रवाई नहीं करता |
व्यावहारिक उत्तर है एक छोटा जोड़ा हुआ समूह, जिसमें लक्ष्य कम ही इस्तेमाल हों, केवल उन स्थितियों के लिए जो अच्छी तरह समझी गई हैं और जिन्हें उपयोगकर्ताओं ने माँगा है, जैसे सेवा-स्तर लक्ष्य। बाकी सब चर्चा का प्रश्न है। उद्देश्य निर्णयों से विवेक को हटाना नहीं, बल्कि उसे बेहतर प्रमाण देना है।
अपनी टीम के साथ चर्चा के प्रश्न
1. पिछली तिमाही में हमने कौन-सा निर्णय लिया जिसे किसी संख्या ने सचमुच बदला? समूह से विशिष्ट निर्णय याद करने को कहें, फिर पता लगाएँ कि कौन-से, यदि कोई हों, डेटा पर निर्भर थे। यदि सूची छोटी है, तो यह उपयोगी जानकारी है: इसका मतलब है कि वर्तमान रिपोर्टिंग का बड़ा हिस्सा अपना खर्च नहीं निकाल रहा। सूत्रधार को उन मीट्रिक्स को दर्ज करना चाहिए जिन्होंने निर्णय बदले, क्योंकि वे संरक्षण की उम्मीदवार हैं। फिर पूछें कि कौन-से निर्णय अंतर्ज्ञान से लिए गए और क्या कोई संख्या मदद कर सकती थी।
2. हमारी वर्तमान संख्याओं में से कौन-सी गतिविधि का वर्णन करती हैं, और कौन-सी उपयोगकर्ताओं के लिए मूल्य का? वर्तमान डैशबोर्ड को स्क्रीन पर रखें और हर मीट्रिक को गतिविधि (बंद टिकट, चले हुए बिल्ड, पूरे हुए पॉइंट) या परिणाम (काम कर पाते उपयोगकर्ता, दोबारा न होती समस्याएँ) के रूप में चिह्नित करें। सीमा-रेखा के मामलों पर देर तक बहस न करें। मक़सद संतुलन देखना है। जहाँ केवल गतिविधि है, वहाँ पूछें कि गतिविधि से कौन-सा परिणाम पैदा होना चाहिए और टीम को कैसे पता चलेगा।
3. डिलीवरी और संचालन की संख्याएँ आज कहाँ रहती हैं, और क्या दोनों को वही लोग देखते हैं? पता करें कि हर माप-परिवार कहाँ संग्रहीत है और उसकी समीक्षा कौन करता है। टीमें अक्सर यह जानकर चौंकती हैं कि परिवर्तन का डेटा एक समूह देखता है और घटना का डेटा दूसरा, बिना किसी साझा बैठक के। पूछें कि दोनों के कभी साथ न देखे जाने से कौन-सा पैटर्न छूट सकता है। एक जगह या एक बैठक तय करें जहाँ वे मिलें।
4. हम क्या नहीं माप रहे जिसे न जानने पर हमें पछतावा होगा? मीट्रिक्स की जगह चिंताएँ आमंत्रित करें: "मुझे डर है कि हमें पता न चलता अगर..." उत्तरों से उम्मीदवार मापों तक काम करें, फिर उस सबसे सस्ते डेटा तक जो उन्हें दिखाएगा। सूची छोटी रखें।
5. नेतृत्व को संख्याएँ दिखाने से पहले हमें उनके बारे में क्या मानना होगा? चर्चा करें कि डेटा को भरोसेमंद क्या बनाता है: स्थिर परिभाषाएँ, नमूना-आधारित सटीकता जाँच और अपवर्जनों पर सहमति। टीम के संदेहों की सूची बनाएँ, छोटे भी, जैसे कोई स्थिति जो असंगत ढंग से इस्तेमाल होती है। तय करें कि कौन-से संदेह व्यापक साझा करने से पहले ठीक होने चाहिए और कौन-से संख्या के साथ बताए जा सकते हैं।
6. यदि अगली तिमाही के लिए हम केवल तीन मीट्रिक्स रख सकें, तो वे कौन-सी होंगी और क्यों? यह सीमा प्राथमिकताएँ तय करवाती है। हर व्यक्ति से तीन लिखने को कहें, फिर तुलना करें। परिणामों पर सहमति और गतिविधि के मापों पर असहमति खोजें। पूछें कि इन तीनों में से हर एक को किस सुरक्षा-रेखा की ज़रूरत है।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
डिलीवरी टीमों को तेज़, स्थानीय प्रतिक्रिया से सबसे अधिक लाभ होता है: काम कितनी देर इंतज़ार करता है, कहाँ कतार लगती है, परिवर्तन कितनी बार समस्याएँ पैदा करते हैं। उन्हें अपने लिए समृद्ध कार्य-दृश्य रखना चाहिए और बाहर के लिए छोटा समूह प्रकाशित करना चाहिए। टीमों को मूल्य के प्रतिनिधि के रूप में उत्पादन की मात्रा मापने के खिंचाव का विरोध करना चाहिए, और शुरू से गति के मापों को गुणवत्ता के मापों के साथ जोड़ना चाहिए (देखें विषय 2.1, प्रवाह के माप)।
सेवा और संचालन टीमें
संचालन टीमें पहले से संख्याओं के साथ जीती हैं: मात्राएँ, प्रतिक्रिया और समाधान के समय, उपलब्धता। अवसर यह है कि जो हुआ उसकी रिपोर्टिंग से आगे बढ़कर यह समझाया जाए कि क्यों हुआ, पुनरावृत्ति, मूल कारणों और अनियोजित कार्य के हिस्से के ज़रिए (देखें विषय 2.9, संचालन-कार्य और अनियोजित कार्य)। उन्हें अपना डेटा डिलीवरी टीमों के साथ नियोजन की बातचीत में भी लाना चाहिए, ताकि विश्वसनीयता के काम के पक्ष में तर्क शिकायत से नहीं, प्रमाण से दिया जाए।
नेतृत्व और शासन
नेता प्रोत्साहन तय करते हैं, अक्सर अनजाने में, अपने पूछे प्रश्नों के ज़रिए। जो नेता पूछता है "यह लाल क्यों है?", वह टीमों को लाल छिपाना सिखाता है। जो नेता पूछता है "आपने क्या सीखा, और आपको क्या चाहिए?", वह टीमों को ईमानदारी से रिपोर्ट करना सिखाता है। शासन-निकायों को संख्याओं के साथ रजिस्टर, सुरक्षा-रेखाएँ और सुधार-कार्रवाइयाँ भी माँगनी चाहिए, और उस काम को निधि देनी चाहिए जो कोई बुरी संख्या उजागर करती है (देखें विषय 1.4, मीट्रिक्स का शासन और स्वामित्व)।
ग्राहक और उपयोगकर्ता
उपयोगकर्ता सेवा को इस आधार पर परखते हैं कि वह चलती है या नहीं और समस्याएँ ठीक की जाती हैं या नहीं, आंतरिक मापों से नहीं। उनके अपने शब्द, सर्वेक्षणों, शिकायतों और टिप्पणियों में, संचालन की संख्याओं के बगल में होने चाहिए, इस जाँच के रूप में कि टीम वह माप रही है या नहीं जो मायने रखता है (देखें विषय 6.1, ग्राहक संतुष्टि मीट्रिक्स)।
व्यवहार में: सेवा प्रबंधन का एक उदाहरण
एक मध्यम आकार का ऑनलाइन खुदरा विक्रेता एक सर्विस डेस्क, एक संचालन टीम और तीन उत्पाद टीमें चलाता है जो स्टोरफ़्रंट, भुगतान और फ़ुलफ़िलमेंट सेवाएँ बनाती हैं। नीचे की संख्याएँ उदाहरण के लिए हैं।
नेतृत्व पूछता है कि ग्राहक धीमे चेकआउट की शिकायत क्यों करते हैं जबकि डिलीवरी टीमें कहती हैं कि वे रोज़ शिप करती हैं और संचालन टीम कहती है कि उपलब्धता 99.9 प्रतिशत है। हर समूह अपने मापों से सही है, और किसी ने उन्हें साथ नहीं देखा। सेवा प्रबंधन प्रमुख चेकआउट सेवा के लिए एक पन्ने का जोड़ा हुआ दृश्य प्रस्तावित करता है, जो उस डेटा से बना है जो टीमें पहले से इकट्ठा करती हैं।
यह दृश्य पिछले बारह हफ़्तों के चार चीज़ें दिखाता है। परिवर्तन का लीड टाइम माध्यिका 2 दिन और 85वें पर्सेंटाइल पर 9 दिन है। परिवर्तन विफलता दर 8 प्रतिशत है। चेकआउट पर घटनाएँ 14 हैं, जिनमें से 6 का एक ही कारण है, हाल की रिलीज़ से आई एक धीमी डेटाबेस क्वेरी। औसत बहाली समय की माध्यिका 40 मिनट है, पर 95वें पर्सेंटाइल पर पेज-लोड समय छह हफ़्तों में धीरे-धीरे बढ़ा है, एक ऐसा पैटर्न जिसे उपलब्धता का आँकड़ा नहीं दिखाता क्योंकि सेवा तकनीकी रूप से चालू बनी रही।
समूह को वह दिखता है जो छिपा था। उपलब्धता को "चेकआउट जवाब देता है" के रूप में मापा गया था, जबकि उपयोगकर्ता अनुभव करते हैं "चेकआउट पर्याप्त तेज़ी से जवाब देता है।" उत्पाद टीम और संचालन टीम सहमत होती हैं कि चेकआउट के लिए एक विलंबता संकेतक जोड़ा जाए, जिसका लक्ष्य उत्पाद स्वामी ग्राहक टिप्पणियाँ पढ़कर तय करे, बार-बार आने वाले घटना-कारण को स्वामी सहित समस्या रिकॉर्ड माना जाए, और जोड़े हुए दृश्य की हर पखवाड़े समीक्षा हो। वे एक निर्णय दर्ज करते हैं: क्वेरी ठीक करने और रिलीज़ पाइपलाइन में प्रदर्शन जाँच जोड़ने के लिए निरंतर सॉफ़्टवेयर डिलीवरी की एक अवधि तक नई चेकआउट सुविधाएँ रोकना।
एक महीने के भीतर गेमिंग का जोखिम सामने आता है। संचालन टीम देखती है कि 14 में से दो घटनाएँ "सेवा अनुरोध" के रूप में खोली गई थीं क्योंकि अनुरोध श्रेणी पर कोई समाधान-लक्ष्य नहीं है। टीम समझती है कि घटनाओं पर लक्ष्य ने लोगों को सीमा-रेखा के मामले अनुरोध के रूप में वर्गीकृत करने की ओर धकेला था। वे पुनर्वर्गीकृत हिस्से को दृश्य में जोड़ते हैं और हर महीने दस टिकटों का नमूना लेते हैं। बदलाव के बाद 95वें पर्सेंटाइल का पेज-लोड समय गिरता है, दोहराई जाने वाली घटनाएँ घटती हैं, और टीम यह दृश्य रखती है क्योंकि उसने एक निर्णय बदला है।
एजाइल, AI, स्वचालन और विश्लेषण
एजाइल
निरंतर डिलीवरी और हितधारकों की निरंतर भागीदारी आपको छोटे परिवर्तनों की स्थिर आपूर्ति और नियमित प्रतिक्रिया देती है, जो मुट्ठी भर ईमानदार संख्याओं के लिए ठीक वही चाहिए। एक उपयोगी प्रथा यह है कि हर नियमित सुधार-बातचीत में मापों के उसी छोटे समूह की समीक्षा करें और पूछें कि टीम आगे क्या बदलेगी। सावधानी यह है कि समीक्षा को स्थिति-रिपोर्ट न बनने दें: निर्णय से जुड़े बिना दिखाई गई संख्या अतिरिक्त बोझ है।
AI
AI-सहायता प्राप्त कार्य टिकट के मसौदे, प्रस्तावित परिवर्तन या लिखे लेख जैसी उत्पादन-गिनती को बढ़ा सकता है, बिना उपयोगकर्ता को मिलने वाले मूल्य को बढ़ाए। AI-सहायता प्राप्त कार्य के हर मात्रा-माप को किसी गुणवत्ता-माप के साथ जोड़ें, जैसे उन मसौदों का हिस्सा जिन्हें किसी व्यक्ति को सुधारना पड़ा या AI द्वारा उत्तर दिए गए अनुरोधों की दोबारा संपर्क दर। सावधानी यह है कि AI के उपयोग की संख्या अपनाने को दिखाती है, लाभ को नहीं, इसलिए बताएँ कि वह क्या नहीं दिखा सकती।
स्वचालन
टाइमस्टैम्प और स्थितियाँ रिकॉर्ड-प्रणाली से स्वचालित रूप से इकट्ठा करें, ताकि कोई रिपोर्ट में संख्याएँ टाइप न करे। जल्दी अपनाने लायक प्रथा एक छोटी स्वचालित जाँच है जो गायब टाइमस्टैम्प और असंभव क्रमों को चिह्नित करे। सावधानी यह है कि स्वचालन को भी मापना पड़ता है: चुपचाप विफल होने वाली पाइपलाइन या बॉट आगे की हर संख्या को स्वस्थ दिखा देता है।
विश्लेषण
चार्ट बनाने से पहले प्रश्न और निर्णय तय करें, और दिखाएँ कि हर दर के पीछे कितने आइटम हैं। अकेले औसत की जगह पर्सेंटाइल और रुझान इस्तेमाल करें, और परिभाषा के हर बदलाव को चार्ट पर चिह्नित करें। सावधानी अनिश्चितता की है: आइटमों की छोटी गिनती प्रतिशत को बहुत दूर तक हिला सकती है, इसलिए एक महीने के डेटा पर कार्रवाई करने से बचें। विशेष रूप से ITIL 5 के लिए देखें विषय 1.8, ITIL 5 मापन और मूल्य परिणाम।
क्षेत्र का नज़रिया
स्टार्टअप। छोटी टीमों में प्रक्रिया कम और भरोसा गहरा होता है, जो मदद करता है। जोखिम यह है कि ज़रूरत से पहले बड़े उद्यम का डैशबोर्ड आयात कर लिया जाए। दो या तीन माप से शुरू करें जिन्हें संस्थापक साप्ताहिक पढ़ेंगे, जैसे परिवर्तन का लीड टाइम, एक सरल विश्वसनीयता संकेतक और सीधी उपयोगकर्ता प्रतिक्रिया, और उनकी परिभाषाएँ लिख लें।
छोटा व्यवसाय। IT चलाने वाला व्यक्ति अक्सर मालिक को रिपोर्ट करता है, और एक ग्राहक की शिकायत किसी भी चार्ट पर भारी पड़ सकती है। समूह छोटा रखें, वह डेटा इस्तेमाल करें जो आपके औज़ार पहले से बनाते हैं, और उपयोगकर्ताओं से बातचीत को वरीयता दें। विक्रेता द्वारा दी गई रिपोर्टों को कुछ सावधानी से लें, क्योंकि विक्रेताओं के अपने प्रोत्साहन होते हैं।
उद्यम। पैमाना तुलनीय संख्याओं की माँग और उन्हें गेम करने का दबाव, दोनों गुणा कर देता है। लिखित परिभाषाओं वाला छोटा मानक समूह इस्तेमाल करें, टीम के कार्य-दृश्यों को रोल-अप से अलग रखें, और उन टीमों की तुलना से बचें जो बहुत अलग प्रकार की सेवाएँ चलाती हैं। मीट्रिक रजिस्टर, साझा परिभाषाएँ और समीक्षा की लय अनिवार्य हो जाती हैं।
सरकार और सार्वजनिक क्षेत्र। अनुबंधित सेवा-स्तर, ऑडिट आवश्यकताएँ और सार्वजनिक रिपोर्टिंग के दायित्व कुछ मापों को अपरिहार्य बना सकते हैं। इन्हें डिज़ाइन के इनपुट मानें: इन्हें पूरा करें, इनके बगल में सुरक्षा-रेखा दिखाएँ और प्रयुक्त परिभाषाएँ बताएँ। सार्वजनिक जवाबदेही बुरी खबर छिपाने की कीमत बढ़ाती है, इसलिए स्पष्ट रिपोर्टिंग के लिए सुरक्षित आंतरिक माध्यम बनाएँ (देखें विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
मापने की प्रेरणा कम लागत पर बेहतर निर्णय है। मापन प्राथमिकता तय करने में सहारा देता है, दिखाता है कि बर्बादी कहाँ है, सेवा के गिरने की पूर्व-चेतावनी देता है, और निवेश अनुरोधों के लिए प्रमाण देता है।
लागत के कई हिस्से हैं। औज़ार हैं, जो अक्सर पहले से स्वामित्व में होते हैं: टिकटिंग प्रणाली, इश्यू ट्रैकर, वर्ज़न कंट्रोल और निगरानी। मीट्रिक्स परिभाषित करने, दृश्य बनाने और रजिस्टर बनाए रखने में लगा स्टाफ़ का समय है। समीक्षा बैठकों की आवर्ती लागत है, जो सबसे बड़ी और सबसे सार्थक है। मापन-अभ्यास की स्वामित्व की कुल लागत (TCO) में निष्कर्षों पर कार्रवाई की लागत भी शामिल है, क्योंकि जिस अंतर्दृष्टि के लिए सुधार का बजट न हो, उसका प्रतिफल बहुत कम होता है।
प्रतिफल को किसी सार्वभौमिक आँकड़े में बताना कठिन है, और यह पुस्तक कोई आँकड़ा गढ़ती नहीं। मामला बनाने का उपयोगी तरीका है किसी बदलाव से पहले और बाद में अपनी ही बेसलाइन मापना: मैन्युअल रिपोर्टिंग पर बिताया समय, दोबारा संपर्क, डेटा गलत होने के कारण पलटे गए निर्णय, और देर से मिले झटके। अपेक्षित पैटर्न है कम झटके, छोटी बहसें, और संचालन की संख्याओं तथा उपयोगकर्ता अनुभव के बीच बेहतर मेल। खर्च किए गए प्रयास की बचाए गए प्रयास से एक सरल निवेश पर प्रतिफल (return on investment, ROI) तुलना उचित शुरुआती बिंदु है, और विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य इसकी विधि बताता है।
प्रतिरूप-विरोधी और जाल
- सब कुछ का डैशबोर्ड। दर्जनों चार्ट, कोई स्वामी नहीं, कोई निर्णय नहीं। कुछ चुनें, हर एक जिस निर्णय को सूचित करता है उसका नाम लिखें, और बाकी को समाप्त करें।
- एकतरफ़ा मापन। स्थिरता के बिना गति, या प्रासंगिकता के बिना स्थिरता। प्रवाह के माप को सेवा के माप के साथ जोड़ें।
- लोगों को मापना। व्यक्तिगत क्रम डेटा बिगाड़ते हैं और मदद को हतोत्साहित करते हैं। टीमों और सेवाओं के स्तर पर रिपोर्ट करें।
- बेसलाइन से पहले लक्ष्य। प्रारंभिक मान के बिना लक्ष्य अनुमान है। पहले बेसलाइन दर्ज करें, और लक्ष्य कम से कम एक समीक्षा चक्र के बाद तय करें।
- कार्रवाई के बिना रिपोर्टें। जो समीक्षा कोई बदलाव नहीं लाती, वह लोगों को उसे अनदेखा करना सिखाती है। हर समीक्षा को नामित कार्रवाई, स्वामी और तारीख़ पर खत्म करें।
- चुपचाप परिभाषा बदलना। रुझान-रेखाएँ अर्थहीन हो जाती हैं। हर बदलाव को उसके कारण सहित लॉग करें और चार्ट पर चिह्नित करें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वयन |
|---|---|---|---|---|---|
| उद्देश्य और चयन | मीट्रिक्स इसलिए चुनी गईं कि औज़ार उन्हें देता है | कुछ मीट्रिक्स का घोषित उद्देश्य है | रिपोर्ट की गई हर मीट्रिक का लिखित प्रश्न और निर्णय है | मीट्रिक समूह की समीक्षा निर्णयों के सामने होती है और अनुपयोगी होने पर उसे समाप्त किया जाता है | मीट्रिक्स का सह-डिज़ाइन उपयोगकर्ताओं और आपूर्तिकर्ताओं के साथ साझा परिणामों के आसपास होता है |
| एजाइल और ITIL का जोड़ा हुआ दृश्य | डिलीवरी और सेवा का डेटा अलग-अलग रखा जाता है | कुछ टीमें दोनों को साथ देखती हैं | प्रति सेवा प्रवाह और सेवा-स्वास्थ्य का साझा दृश्य | जोड़े हुए दृश्य का रुझान देखा जाता है और वह सुधार-कार्य से जुड़ा है | टीमों के आर-पार और आपूर्तिकर्ता दृश्य उपयोगकर्ता परिणामों से बँधे हैं |
| बेसलाइन और प्रयास | कोई बेसलाइन नहीं; मैन्युअल संग्रह | कुछ सेवाओं के लिए बेसलाइन; मिश्रित संग्रह | मुख्य मापों के लिए बेसलाइन दर्ज; संग्रह अधिकतर स्वचालित | बदलावों के बाद बेसलाइन ताज़ा की जाती हैं; प्रयास ट्रैक होता और घटाया जाता है | सेवाओं के बदलने के साथ बेसलाइन और परिभाषाएँ लगातार समायोजित होती हैं |
| सुधार में उपयोग | संख्याएँ नोट होकर भुला दी जाती हैं | बुरे हफ़्तों के बाद कभी-कभार कार्रवाइयाँ | हर समीक्षा नामित कार्रवाइयों पर खत्म होती है | कार्रवाई के अनुवर्तन को मापा और निधि दी जाती है | सुधार सबसे आता है और टीमों के आर-पार दृश्य है |
जाँच-सूची
- रिपोर्ट की गई हर मीट्रिक का एक लिखित प्रश्न है और एक नामित निर्णय जिसे वह सूचित करती है।
- हर दृश्य का श्रोता नामित है, और टीम के दृश्य नेतृत्व के दृश्यों से अलग हैं।
- कम से कम एक प्रवाह माप और एक सेवा माप एक ही पन्ने पर दिखते हैं।
- हर मुख्य माप के लिए तारीख़ की सीमा और नमूने के आकार सहित बेसलाइन मौजूद है।
- हर समय-माप बताता है कि घड़ी कहाँ शुरू और कहाँ बंद होती है।
- हर मीट्रिक के बगल में एक सुरक्षा-रेखा दिखती है।
- मैन्युअल संग्रह का प्रयास ज्ञात है, और सबसे बड़े मैन्युअल काम की समीक्षा स्वचालन के लिए की जा चुकी है।
- टीमें नेतृत्व से पहले अपना डेटा देखती हैं।
- किसी व्यक्तिगत क्रम, वेतन या अनुशासन को किसी मीट्रिक से नहीं जोड़ा गया।
- हर समीक्षा कम से कम एक नामित सुधार-कार्रवाई, स्वामी और तारीख़ के साथ खत्म होती है।
- पिछले वर्ष में कम से कम एक मीट्रिक समाप्त या पुनर्परिभाषित की गई है।
AI प्रॉम्प्ट
हर मीट्रिक के लिए उद्देश्य-कथन का मसौदा बनाएँ।
हम [टीम का नाम] हैं, जो [सेवा या उत्पाद] के लिए ज़िम्मेदार हैं। हमारे
वर्तमान डैशबोर्ड पर ये मीट्रिक्स हैं: [परिभाषाओं सहित मीट्रिक्स की सूची]।
हर एक के लिए "हम X को Y तय करने के लिए मापते हैं" रूप में एक वाक्य का
कथन बनाएँ, और जिस भी मीट्रिक के लिए मेरे दिए विवरण से आप निर्णय का
अनुमान नहीं लगा सकते उसे चिह्नित करें। सुझाएँ कि हर कथन को पूरा करने के
लिए मुझे किन प्रश्नों के उत्तर देने चाहिए। बेंचमार्क मान या लक्ष्य न
गढ़ें। अपनी मान्यताएँ सूचीबद्ध करें।
डिलीवरी और सेवा के दृश्यों को जोड़ें।
[सेवा का नाम] के लिए हमारे डिलीवरी माप [परिभाषाओं और डेटा स्रोतों सहित
सूची] हैं और हमारे सेवा माप [परिभाषाओं और डेटा स्रोतों सहित सूची] हैं।
एक पन्ने का ऐसा लेआउट प्रस्तावित करें जो दोनों को साथ दिखाए, हर गति-माप
को स्थिरता या गुणवत्ता के माप के साथ जोड़े, और बताए कि हर एक को कौन-सा
डेटा चाहिए। दोनों समूहों के बीच जिन परिभाषाओं में टकराव है उन्हें
पहचानें। मान या सीमाएँ न गढ़ें। अपनी मान्यताएँ और जो आप तय नहीं कर सके
वह सूचीबद्ध करें।
बेसलाइन की योजना बनाएँ।
हम [प्रथा या औज़ार] बदलने से पहले [टीम या सेवा] के लिए [मीट्रिक का नाम]
की बेसलाइन दर्ज करना चाहते हैं। डेटा [स्रोत] से आता है। प्रस्तावित करें
कि डेटा कितनी अवधि तक इकट्ठा किया जाए, कौन-से सारांश आँकड़े (पर्सेंटाइल
सहित) दर्ज किए जाएँ, क्या और क्यों बाहर रखा जाए, और उस अवधि में काम
गिनने के तरीके में किसी बदलाव को कैसे नोट किया जाए। मान न मानें। अपनी
मान्यताएँ और आपको दिखते डेटा-गुणवत्ता के जोखिम सूचीबद्ध करें।
ऐसी समीक्षा तैयार करें जो कार्रवाई तक ले जाए।
हम [श्रोता] के साथ [मीट्रिक समूह] की [साप्ताहिक, मासिक या तिमाही]
समीक्षा करते हैं। एजेंडा और सुगमकर्ता-प्रश्नों का एक छोटा समूह बनाएँ जो
संख्याएँ पढ़ने से एक या दो सुधार-कार्रवाइयाँ चुनने तक ले जाए, हर एक
स्वामी और तारीख़ के साथ। हर मीट्रिक की सुरक्षा-रेखा के विरुद्ध गेमिंग
जाँचने का एक संकेत शामिल करें। डेटा न गढ़ें। समूह और उसकी संस्कृति के
बारे में अपनी मान्यताएँ सूचीबद्ध करें।
AI स्किल
- Service Management Metrics skill: उस विषय को खोजने के लिए जो आपके विचाराधीन मीट्रिक को और उसकी जोड़ीदार सुरक्षा-रेखा को कवर करता है।
- Service Management Metrics maintainer skill: यह जाँचने के लिए कि नया या संशोधित मीट्रिक विषय उद्देश्य-कथन, गेमिंग का रास्ता और सुरक्षा-रेखा बनाए रखता है।
मुख्य निष्कर्ष
- देखने, निर्णय लेने, सीखने और हिसाब देने के लिए मापें; जो संख्या इनमें से कुछ नहीं करती वह अतिरिक्त बोझ है।
- एजाइल प्रवाह पर तेज़, स्थानीय प्रतिक्रिया देता है; ITIL विश्वसनीयता और मूल्य के साझा, सेवा-स्तर के दृश्य देता है। दोनों को साथ पढ़ें।
- कुछ न मापने से निर्णय किस्सों के भरोसे रह जाते हैं, और गलत चीज़ें मापना झूठे आत्मविश्वास से प्रयास को दिशा देता है।
- कुछ मीट्रिक्स से शुरू करें, हर एक का लिखित उद्देश्य, बेसलाइन और सुरक्षा-रेखा हो।
- टीमों और सेवाओं का वर्णन करें, व्यक्तियों का कभी नहीं, और टीम को अपना डेटा पहले देखने दें।
- चक्र बंद करें: जो समीक्षा कोई कार्रवाई नहीं लाती वह डेटा व्यर्थ करती है।
संदर्भ और आगे का अध्ययन
- Beck, K., et al., Manifesto for Agile Software Development, 2001, https://agilemanifesto.org/.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Forsgren, N., Storey, M.-A., Maddila, C., Zimmermann, T., Houck, B., and Butler, J., "The SPACE of Developer Productivity," ACM Queue, 19(1), 2021.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016.
- Vacanti, D., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Vacanti, D., Yeret, Y., et al., The Kanban Guide, 2020, https://kanbanguides.org/.
- AXELOS, ITIL Foundation: ITIL 4 Edition, TSO, 2019.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997.
- Muller, J. Z., The Tyranny of Metrics, Princeton University Press, 2018.
- Wikipedia, Agile software development.
- Wikipedia, ITIL.
- Wikipedia, Information technology service management.
- Wikipedia, DevOps.
- Wikipedia, Site reliability engineering.
- Wikipedia, Goodhart's law.
- Wikipedia, Return on investment.