मीट्रिक्स कार्यक्रमों के लिए परिपक्वता मॉडल
साझा पाँच-स्तरीय पैमाने का उपयोग यह बताने के लिए करें कि मीट्रिक्स कार्यक्रम कहाँ है और अगला छोटा कदम चुनने के लिए करें, कभी ऐसे अंक के रूप में नहीं जिसे प्रदर्शित, तुलना या प्रमाणित किया जाए।
अवलोकन और प्रेरणा
इस पुस्तक का हर दूसरा विषय अपने विषय की एक छोटी परिपक्वता तालिका के साथ समाप्त होता है। यह विषय उसी पैमाने को पूरे मीट्रिक्स कार्यक्रम पर लागू करता है। प्रश्न यह नहीं है कि किसी टीम के घटना-समय कितने अच्छे हैं। प्रश्न यह है कि संगठन मापों को कितनी अच्छी तरह इकट्ठा करता है, पढ़ता है और उन पर कार्रवाई करता है: क्या परिभाषाएँ साझा हैं, क्या डेटा पर भरोसा है, क्या संख्याएँ निर्णयों तक ले जाती हैं, और क्या मापे जा रहे लोग कार्यक्रम को सहायता के रूप में देखते हैं।
परिपक्वता मॉडल उन चरणों का वर्णन है जिनसे होकर कोई संगठन गुज़र सकता है जब कोई पद्धति विकसित होती है। सॉफ़्टवेयर में सबसे प्रसिद्ध उदाहरण कैपेबिलिटी मैच्योरिटी मॉडल (Capability Maturity Model) है, जो Software Engineering Institute के काम से उभरा और व्यापक रूप से फैला। इसका प्रभाव बड़ा था, और उसके बाद आई आलोचना भी। संगठन क्षमता के बजाय स्तर के पीछे भागे, ऑडिटरों ने कागज़ी कार्रवाई को अंक दिए, और मॉडल बिल्ले की तरह इस्तेमाल होने लगा। किसी भी परिपक्वता मॉडल का ज़िम्मेदार उपयोग तीन सावधानियाँ ध्यान में रखता है। पैमाना बातचीत का औज़ार है, प्रमाणन नहीं। ऊँचा हमेशा बेहतर नहीं होता, क्योंकि सही स्तर संदर्भ पर निर्भर करता है। और मॉडल परिणामों का विकल्प नहीं है: जो परिपक्व कार्यक्रम सेवाओं को बेहतर नहीं बनाता, वह बहुत सुव्यवस्थित विफलता है, और बिल्ले की तरह दिखाया गया स्तर वैनिटी मीट्रिक (vanity metric) जैसा ही है, एक ऐसी संख्या जो अच्छी दिखती है और किसी निर्णय को सूचित नहीं करती।
यहाँ प्रयुक्त पैमाना वही है जो पूरी पुस्तक और Service Management Guide में साझा है: आरंभ, विकास, मानकीकरण, प्रबंधन और समन्वयन (देखें विनिर्देश में साझा परिपक्वता मॉडल)। यह जानबूझकर ITIL, ISO/IEC 33000 या कैपेबिलिटी मैच्योरिटी मॉडल के प्रक्रिया-परिपक्वता पैमानों जैसा नहीं है, और किसी टीम को इस पैमाने के आधार पर उन ढाँचों में किसी अंक का दावा नहीं करना चाहिए।
एजाइल लक्ष्य इसके उपयोग का तरीका बताते हैं। सतत सुधार का अर्थ है कि मॉडल अगला कदम खोजने के लिए है, किसी अंतिम अवस्था तक पहुँचने के लिए नहीं। निरंतर विकास का अर्थ है कि जो कार्यक्रम पिछले वर्ष समन्वयन पर पहुँचा था, वह लोगों के जाने या प्राथमिकताएँ बदलने पर पीछे जा सकता है, इसलिए स्व-मूल्यांकन दोहराया जाता है। हितधारकों की निरंतर भागीदारी का अर्थ है कि मूल्यांकन टीमों के साथ किया जाता है, उन पर नहीं। टिकाऊ गति का अर्थ है कि कार्यक्रम एक बार में एक कदम चलता है और एक तिमाही में तीन स्तर लाँघने की कोशिश नहीं करता। और प्रेरित व्यक्तियों के इर्द-गिर्द निर्माण का अर्थ है कि काम करने वाले लोग ही तय करते हैं कि कार्यक्रम उनकी मदद करता है या नहीं। यह ITIL की सतत सुधार पद्धति का ही तर्क है, जिसमें संगठन वर्तमान स्थिति जाँचता है, दिशा तय करता है और छोटे कदमों में सुधरता है, एक आदत जो काइज़ेन (kaizen) के निकट है, यानी सबके द्वारा निरंतर सुधार का जापानी विचार। अधिक सामान्य विचार सतत सुधार प्रक्रिया (continual improvement process) है (देखें विषय 9.5, सतत सुधार मीट्रिक्स)।
मीट्रिक्स के संदर्भ में मॉडल में एक विशेष जाल है। जिस कार्यक्रम का मूल्यांकन उसी के मापों पर होता है, वह उसी विकृति को न्योता देता है जिसके विरुद्ध वह चेताता है। यदि "परिभाषाओं वाले मापों की संख्या" लक्ष्य बन जाए, तो परिभाषाएँ बढ़ती जाती हैं। इसलिए इस विषय का दृष्टिकोण गिनतियों के अतिरिक्त काम से मिले प्रमाण (कौन-से निर्णय बदले, टीमें क्या कहती हैं) का उपयोग करता है, और मूल्यांकन का स्वामित्व उन टीमों के पास रखता है जिन्हें उसे फुलाने से सबसे कम लाभ है (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)। टीमों के लिए एक सहायक मूल्यांकन प्रपत्र परिशिष्ट में है (देखें विषय 12.5, परिपक्वता स्व-मूल्यांकन)।
मुख्य सिद्धांत
- पैमाना बातचीत का औज़ार है। यह लोगों को वर्तमान का वर्णन करने और अगला कदम चुनने में मदद करता है। यह रेटिंग, क्रम-निर्धारण या प्रमाणन के लिए नहीं है।
- टीमों के साथ मूल्यांकन करें। खुलकर चर्चा के साथ किया गया स्व-मूल्यांकन बाहरी अंक-निर्धारण से अधिक सटीक होता है।
- प्रमाण से परखें। पूछें कि कौन-से निर्णय बदले, लोग क्या कहते हैं और डेटा क्या दिखाता है, साथ ही यह भी कि कौन-से दस्तावेज़ मौजूद हैं।
- आयाम अलग-अलग हो सकते हैं। कार्यक्रम औज़ारों में मज़बूत और भरोसे में कमज़ोर हो सकता है। एक अकेली संख्या नहीं, पूरी प्रोफ़ाइल बताएँ।
- एक बार में एक कदम चलें। एक या दो आयामों में अगले स्तर का लक्ष्य रखें, सब कुछ एक साथ नहीं।
- ऊँचा हमेशा बेहतर नहीं होता। वह स्तर चुनें जो संगठन के आकार, जोखिम और ज़रूरतों के अनुरूप हो।
- पीछे लौटने की अपेक्षा रखें। कर्मचारियों का जाना, पुनर्गठन और दबाव कार्यक्रम को पीछे धकेल सकते हैं। नियमित रूप से पुनर्मूल्यांकन करें।
- टीमों की रैंकिंग तालिका कभी प्रकाशित न करें। कार्यक्रम के लिए समेकित रूप दें और टीम के परिणाम केवल उसी टीम के साथ साझा करें।
मीट्रिक परिभाषाएँ
नीचे के माप कार्यक्रम के स्वास्थ्य और उसके मूल्यांकन का वर्णन करते हैं। ये कार्यक्रम टीम और प्रायोजकों के लिए हैं, और चर्चा के संकेतों के रूप में पढ़े जाते हैं।
| मीट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL पद्धति | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| मूल्यांकन में भागीदारी | भाग लेने वाली उन टीमों का हिस्सा जिन्होंने अपनी चर्चा के साथ स्व-मूल्यांकन पूरा किया | पूरा करके चर्चा करने वाली टीमें / भाग लेने वाली टीमें | प्रतिशत | मूल्यांकन रिकॉर्ड | सतत सुधार | चिंतन और रेट्रोस्पेक्टिव | साल में दो बार |
| आयाम के अनुसार प्रोफ़ाइल | हर आयाम में टीमों के स्व-मूल्यांकित स्तरों का वितरण, एक सीमा के रूप में, एकल अंक के रूप में नहीं | प्रति आयाम, हर स्तर पर टीमों की गिनती | प्रति स्तर टीमें | स्व-मूल्यांकन, समेकित | सतत सुधार; शासन | दृश्यमान कार्य | साल में दो बार |
| मूल्यांकन से सुधार कार्रवाइयाँ | सहमत अगले कदमों का हिस्सा जो पूरे हुए, कारण सहित छोड़े गए, या अभी चल रहे हैं | बंद या कारण सहित निपटाई गई कार्रवाइयाँ / सहमत कार्रवाइयाँ | प्रतिशत | सुधार रजिस्टर | सतत सुधार | छोटे प्रयोग | तिमाही |
| निर्णय का प्रमाण | नमूने के मापों का हिस्सा जिनके लिए टीम पिछली तिमाही का वह निर्णय या सोचा-समझा चुनाव बता सकती है जिसे माप ने सूचित किया | नामित निर्णय वाले माप / नमूने के माप | प्रतिशत | टीम साक्षात्कार; समीक्षा नोट्स | सतत सुधार | समारोह से ऊपर प्रमाण | तिमाही |
| परिभाषा और डेटा पर भरोसा | टीम-स्तर की सहमति कि परिभाषाएँ स्पष्ट हैं और डेटा सही है | छोटे टीम सर्वेक्षण में सहमत प्रतिशत; प्रतिक्रिया दर दिखाई जाए | प्रतिशत | अनाम टीम सर्वेक्षण | ज्ञान प्रबंधन; सूचना प्रबंधन | साझा समझ | साल में दो बार |
| अगले स्तर तक का समय (वर्णनात्मक) | जहाँ टीम ने चुना, वहाँ किसी आयाम को एक स्तर ऊपर ले जाने में लगा बीता समय | सहमत कदम से टीम के पुनर्मूल्यांकन तक के महीनों की माध्यिका | महीने | मूल्यांकन इतिहास | सतत सुधार | टिकाऊ गति | वार्षिक |
| मूल्यांकन का बोझ | मूल्यांकन में प्रति टीम लगने वाले घंटे | प्रति टीम घंटों की माध्यिका | घंटे | टीमों के समय-अनुमान | सतत सुधार | टिकाऊ गति | साल में दो बार |
भागीदारी को चर्चा सहित पूर्णता के रूप में मापा जाता है, क्योंकि अकेले भरा गया प्रपत्र बहुत कम बताता है। प्रोफ़ाइल एक सीमा है और उसे कभी औसत करके एक परिपक्वता संख्या नहीं बनाया जाता। अगले स्तर तक का समय वर्णनात्मक है: तेज़ चढ़ाई फुलाए गए स्व-अंकन को दर्शा सकती है, और धीमी चढ़ाई उचित सावधानी को। मूल्यांकन का बोझ स्वयं मूल्यांकन की जाँच है, जिसमें प्रति टीम एक-दो घंटे से अधिक नहीं लगने चाहिए।
सिफ़ारिशें
पैमाने का अच्छा उपयोग करें
1. मीट्रिक्स कार्यक्रम के आयाम परिभाषित करें। एक कारगर समूह में छह आयाम हैं: (क) प्रश्न और उद्देश्य, क्या माप उन प्रश्नों का उत्तर देते हैं जो श्रोताओं ने पूछे; (ख) परिभाषाएँ और स्वामित्व, क्या मापों की लिखित परिभाषाएँ और स्वामी हैं; (ग) डेटा और औज़ार, क्या डेटा सटीक, समयोचित और पोर्टेबल है; (घ) निर्णयों में उपयोग, क्या संख्याएँ चुनावों को सूचित करती हैं; (ङ) भरोसा और सुरक्षा, क्या लोग मानते हैं कि डेटा उनकी मदद करता है; और (च) समीक्षा और विकास, क्या कार्यक्रम स्वयं को छाँटता रहता है। छह उपयोगी होने के लिए पर्याप्त हैं और एक घंटे में चर्चा करने लायक कम भी।
2. बताएँ कि हर स्तर कैसा दिखता है। नीचे "परिपक्वता मॉडल" खंड की तालिका हर आयाम के लिए हर स्तर का संक्षिप्त वर्णन देती है। इन्हें संकेत-बिंदु मानें। टीम को शब्दावली अपने संदर्भ के अनुसार ढालनी चाहिए और अपने उदाहरण लिख रखने चाहिए।
3. औसत न निकालें। एक सकल अंक उस पैटर्न को छिपा देता है जो मायने रखता है। जिस कार्यक्रम में औज़ारों की परिपक्वता ऊँची और भरोसा कम है, वह उससे भिन्न स्थिति में है जिसमें इसका उलटा है, और अगला कदम अलग होता है। प्रोफ़ाइल दिखाएँ।
टीमों के साथ मूल्यांकन करें, उन पर नहीं
4. इसे एक घंटे की बातचीत बनाएँ। टीम को तालिका के साथ एक साथ बुलाएँ। हर व्यक्ति से कहें कि वह निजी तौर पर हर आयाम में चिह्नित करे कि टीम कहाँ है, फिर तुलना करें। अंतरों पर चर्चा करें, क्योंकि वे एक ही कार्यक्रम के भिन्न अनुभवों को प्रकट करते हैं। टीम का एक दृष्टिकोण तय करें, उसके पीछे का प्रमाण दर्ज करें, और एक-दो अगले कदम चुनें।
5. प्रमाण माँगें। दावा किए गए हर स्तर के लिए एक उदाहरण पूछें। "हम निर्णयों में संख्याओं का उपयोग करते हैं" यह प्रश्न बुलाता है कि "पिछली तिमाही में कौन-से निर्णय?" जाँच के लिए नमूना-माप और साक्षात्कार का उपयोग करें। यह लोगों का सम्मान करता है और मूल्यांकन को आशावादी कल्पना में बहने से रोकता है।
6. परिणाम टीम के पास रखें। टीम की प्रोफ़ाइल टीम की होती है। कार्यक्रम समेकित सीमाएँ और साझा विषय साझा करता है, क्रम-तालिका नहीं। स्पष्ट करें कि मूल्यांकन निधि, हैसियत या समीक्षाओं को प्रभावित नहीं करता। यदि करता है, तो टीमें उसे फुला देंगी और मूल्य खो जाएगा (देखें विषय 11.3, भय पैदा किए बिना मीट्रिक्स लागू करना)।
अगले कदम चुनें
7. वह आयाम चुनें जो बाकी को सीमित करता है। भरोसा और सुरक्षा अक्सर बाकी सब को सीमित करते हैं: उनके बिना डेटा विकृत होता है और निर्णय संदिग्ध। परिभाषाएँ और स्वामित्व अक्सर डेटा और उपयोग को सीमित करते हैं। एक आम पैटर्न है पहले भरोसा और परिभाषाएँ मज़बूत करना, फिर डेटा, फिर उपयोग और समीक्षा। वह आयाम खोजें जहाँ छोटा सुधार बाकी को खोल दे।
8. छोटा, ठोस कदम तय करें। अगला कदम ऐसा हो जिसे टीम एक तिमाही में पूरा कर सके और पहचान सके: "चार्टर पर सहमत हों," "अपने चार मापों की परिभाषाएँ लिखें," "दो फ़ीड स्वचालित करें," "मासिक समीक्षा करें जिसमें हम निर्णय दर्ज करें।" "स्तर 4 तक पहुँचें" जैसे कदमों से बचें। स्तर एक अवस्था का वर्णन करते हैं, और कदम काम का।
9. कदमों को सुधार रजिस्टर से जोड़ें। कार्रवाइयों को अन्य सुधार कार्य के साथ उसी जगह रखें, स्वामियों और तिथियों के साथ, और नियमित सुधार चर्चा में प्रगति की समीक्षा करें (देखें विषय 9.5, सतत सुधार मीट्रिक्स)। जिस कदम को निधि या समय-सारणी नहीं मिली, वह नहीं होगा।
ईमानदार और हल्का रखें
10. टीमों को रैंक किए बिना उनके बीच अंशांकन करें। एक छोटा सत्र रखें जिसमें टीमें साझा करें कि किसी आयाम में वे किसे स्तर 3 कहती हैं। मानकों के अंतरों पर चर्चा करें। लक्ष्य साझा समझ है, बराबर अंक नहीं। सूत्रधार बदलते रहें, और कार्यक्रम के बाहर की किसी टीम को शब्दावली को चुनौती देने के लिए बुलाएँ।
11. एक लय में, और घटनाओं के जवाब में, पुनर्मूल्यांकन करें। अधिकांश कार्यक्रमों के लिए साल में दो बार पर्याप्त है। पुनर्गठन, औज़ार-परिवर्तन या चार्टर के उल्लंघन के बाद पुनर्मूल्यांकन करें, क्योंकि ये भरोसे को किसी भी दिशा में हिला सकते हैं। पीछे लौटने पर नज़र रखें और उसे विफलता नहीं, सूचना मानें।
12. मॉडल को स्वयं भी छोड़ें या संशोधित करें। हर वर्ष टीमों से पूछें कि क्या आयाम और स्तर-वर्णन अब भी सही बैठते हैं। जो भ्रम पैदा करे उसे दोबारा लिखें, और जिसे कोई उपयोग न करे उसे हटा दें। जो मॉडल पाँच वर्ष से नहीं बदला, वह शायद ऐसे कार्यक्रम का वर्णन कर रहा है जो अब मौजूद नहीं है।
गेमिंग के रास्ते और सुरक्षा-रेखाएँ
| मीट्रिक | इसे कैसे गेम किया जाता है | जोड़ी गई सुरक्षा-रेखा मीट्रिक या पद्धति |
|---|---|---|
| मूल्यांकन में भागीदारी | कोटा पूरा करने के लिए प्रपत्र भरना; पूरी टीम की ओर से एक व्यक्ति का भरना | टीम की चर्चा आवश्यक करें; हर दावे के पीछे का प्रमाण माँगें |
| आयाम के अनुसार प्रोफ़ाइल | अच्छा दिखने के लिए स्तर फुलाना; सहायता पाने के लिए जानबूझकर कम बताना | निधि या हैसियत से न जोड़ें; प्रमाण माँगें; खुले में अंशांकन करें |
| मूल्यांकन से सुधार कार्रवाइयाँ | बंद करने के लिए तुच्छ कदम चुनना; किए बिना बंद करना | कदम के आकार और मूल्य की समीक्षा करें; अगले मूल्यांकन में परिणाम जाँचें |
| निर्णय का प्रमाण | बाद में निर्णय गढ़ना; बिना परिणाम वाले निर्णय गिनाना | तिथि और शामिल लोगों को पूछें; "कुछ न करने का चुनाव" को निर्णय के रूप में स्वीकारें |
| परिभाषा और डेटा पर भरोसा | उत्तरदाताओं को सिखाना; कम प्रतिक्रिया द्वारा असंतोष का छिपना | गुमनामी और न्यूनतम समूह-आकार; प्रतिक्रिया दरें दिखाएँ; टीमों से सीधे बात करें |
| अगले स्तर तक का समय (वर्णनात्मक) | प्रगति के दावों में जल्दबाज़ी; पीछे लौटना छिपाना | वर्णनात्मक रखें; प्रमाण के साथ पढ़ें; बिना दंड के पीछे लौटना दर्ज करें |
| मूल्यांकन का बोझ | घंटे घटाने के लिए चर्चा छोड़ देना | घंटों को भागीदारी और प्रमाण की गुणवत्ता के साथ ट्रैक करें |
स्वस्थ पठन में स्तरों के मिश्रण वाली प्रोफ़ाइल दिखती है, जिसमें औज़ारों और चमक-दमक से पहले भरोसा और परिभाषाएँ बढ़ती हैं, अगले कदम छोटे और पूरे किए हुए हैं, निर्णय ऐसे हैं जिन्हें टीमें नाम से बता सकती हैं, और कभी-कभार पीछे लौटने का ईमानदार रिकॉर्ड है।
समझौते: लाभ और हानि
| दृष्टिकोण | शक्ति | कमज़ोरी |
|---|---|---|
| टीम का स्व-मूल्यांकन | ईमानदार, स्वामित्व वाला, तेज़ | व्यक्तिपरक; अंशांकन चाहिए |
| बाहरी मूल्यांकन | सुसंगत; स्वतंत्र | महँगा; मूल्यांकनकर्ता के लिए प्रदर्शन को न्योता |
| एकल सकल अंक | बताना आसान | पैटर्न छिपाता है; लक्ष्यों को न्योता देता है |
| आयाम के अनुसार प्रोफ़ाइल | दिखाती है कि कहाँ कार्रवाई करें | सारांश बनाना कठिन |
| वार्षिक मूल्यांकन | हल्का | पीछे लौटने को देर से पहचानता है |
| साल में दो बार, घटना-आधारित ट्रिगर के साथ | प्रतिक्रियाशील | अधिक प्रयास |
| निधि से जुड़ा | ध्यान खींचता है | फुलाना और गेमिंग |
| निधि से अलग रखा | ईमानदार डेटा | समर्थन पाने के अन्य तरीके चाहिए |
गद्य में उत्तर यह है: प्रमाण के साथ हल्का स्व-मूल्यांकन चलाएँ, प्रोफ़ाइल और सीमाएँ बताएँ, परिणाम टीमों के पास रखें, और अगले कदमों को निधि या हैसियत से नहीं, बल्कि सुधार रजिस्टर से जोड़ें।
अपनी टीम के साथ चर्चा के प्रश्न
1. छह आयामों में से हम किसे अपना सबसे कमज़ोर कहेंगे, और ऐसा कहने का आधार क्या है? हर व्यक्ति से निजी तौर पर एक चुनने को कहें और फिर साझा करें। सूत्रधार को हाल का उदाहरण माँगना चाहिए। पैटर्न खोजें, और तय करें कि कौन-सा आयाम बाकी को सीमित करता है।
2. क्या हम पिछली तिमाही का कोई ऐसा निर्णय बता सकते हैं जिसे किसी माप ने बदला? उनकी सूची बनाएँ। यदि सूची छोटी है, तो कारण पूछें। चर्चा करें कि समस्या मापों में है, डेटा में है, या देखने की आदत में।
3. भरोसा और सुरक्षा पर हम अपने को कहाँ रखेंगे, और हमें यह कैसे पता है? नज़दीकी-चूक की रिपोर्टों, चुनौतियों और सर्वेक्षण परिणामों को देखें। व्यवहार में लोग जैसे बात करते हैं, उससे तुलना करें। एक ऐसी बात तय करें जो नेता इसे आगे बढ़ाने के लिए कर सकते हैं।
4. हमारे सबसे कमज़ोर आयाम के लिए छोटा, ठोस अगला कदम कैसा दिखेगा? उसे एक वाक्य में, स्वामी और तिथि के साथ लिखें। जाँचें कि वह एक तिमाही में पूरा हो सकता है। तय करें कि हमें कैसे पता चलेगा कि वह कारगर रहा।
5. क्या बात इस मूल्यांकन को खतरे जैसा महसूस कराएगी, और हम इसे कैसे रोकें? परिणामों के उन उपयोगों पर चर्चा करें जिनसे लोग डरेंगे। लिख लें कि परिणामों का उपयोग कभी किसलिए नहीं होगा। जाँचें कि कार्यक्रम प्रमुख सहमत है।
6. क्या कोई ऐसा स्तर है जिस तक हमें पहुँचने की ज़रूरत नहीं? अपने आकार, जोखिमों और लक्ष्यों के बारे में सोचें। ऐसे स्तर का वर्णन करें जो अभी के लिए पर्याप्त है, और ऐसा संकेत जो हमें उसे फिर देखने को कहे।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
टीमें स्वयं का मूल्यांकन करती हैं, अगला कदम चुनती हैं और अपने परिणाम रखती हैं। उन्हें बातचीत का उपयोग अनुभवों के अंतर सामने लाने, प्रमाण माँगने और इतने छोटे कदम तय करने के लिए करना चाहिए जिन्हें पूरा किया जा सके। प्रोफ़ाइल को रैंकिंग में बदलने के किसी भी प्रयास का उन्हें विरोध करना चाहिए।
सेवा और संचालन टीमें
संचालन टीमें भारी डेटा और घटना-भार उठाती हैं और देख सकती हैं कि कार्यक्रम कहाँ उनकी मदद करता है या बोझ डालता है। उन्हें यह दर्ज करना चाहिए कि औज़ार या परिभाषाएँ कहाँ उनके काम को रोकती हैं, ऑन-कॉल और घटना के डेटा को सावधानी से संभालने को कहना चाहिए, और मूल्यांकन के बोझ पर स्पष्ट प्रतिक्रिया देनी चाहिए।
नेतृत्व और शासन
नेता कार्यक्रम को प्रायोजित करते हैं और समेकित चित्र पाते हैं। उन्हें प्रोफ़ाइल और साझा विषय माँगने चाहिए, एकल अंक माँगने से बचना चाहिए, टीमों द्वारा चुने गए अगले कदमों को निधि देनी चाहिए, और निधि या हैसियत को मूल्यांकन से नहीं जोड़ना चाहिए। उन्हें उन निर्णयों का वर्णन करके, जिन्हें मीट्रिक्स ने सूचित किया, स्वयं वैसा व्यवहार भी दिखाना चाहिए।
ग्राहक और उपयोगकर्ता
जब कार्यक्रम सेवाओं को बेहतर बनाता है और उनकी प्रतिक्रिया मापों का हिस्सा होती है, तो ग्राहकों और उपयोगकर्ताओं को लाभ होता है। जहाँ वे भागीदार हैं, वहाँ वे उन मापों के मूल्यांकन में हिस्सा ले सकते हैं जो उनसे संबंधित हैं, जैसे संतुष्टि सर्वेक्षणों की उपयोगिता, और यह जाँचने में कि उनका डेटा कैसे उपयोग होता है।
व्यवहार में: सेवा प्रबंधन का एक उदाहरण
एक राष्ट्रीय बीमा समूह में 20 डिलीवरी और सहायता टीमें हैं और एक मीट्रिक्स कार्यक्रम है जो 18 महीनों से चल रहा है। प्रायोजक निवेश को दिशा देने के लिए "हर टीम का परिपक्वता अंक" माँगता है। कार्यक्रम प्रमुख सतर्क है, क्योंकि उसे याद है कि पिछली ऑडिट-शैली की अंक-प्रणाली ने टीमों को दस्तावेज़ों के बाइंडर तैयार करने की ओर धकेला था। नीचे के आँकड़े उदाहरण के लिए हैं।
कार्यक्रम प्रमुख इसके बजाय छह आयामों में एक प्रोफ़ाइल प्रस्तावित करती है, जिसे टीमें टीम के बाहर के सूत्रधार के साथ एक घंटे की बातचीत में आँकती हैं, और परिणाम टीम के पास रहते हैं। वह प्रायोजक को बताती है कि कार्यक्रम सीमाएँ और साझा विषय बताएगा, और किसी भी टीम की प्रोफ़ाइल निधि से नहीं जोड़ी जाएगी। प्रायोजक सहमत होता है, और निर्णय दर्ज किया जाता है।
20 में से उन्नीस टीमें चर्चा के साथ मूल्यांकन पूरा करती हैं, इसलिए भागीदारी 95 प्रतिशत है। प्रोफ़ाइल एक सीमा दिखाती है: प्रश्न और उद्देश्य में अधिकांश टीमें स्तर 2 या 3 पर हैं; परिभाषाएँ और स्वामित्व में 1 से 4 तक का फैलाव है; डेटा और औज़ारों में अधिकतर 3; निर्णयों में उपयोग में अधिकतर 2; भरोसा और सुरक्षा में 2 और 4 के बीच बँटवारा; और समीक्षा और विकास में अधिकतर 1 या 2। प्रमाण की जाँचें खुलासा करने वाली हैं। ग्यारह टीमों ने निर्णयों में उपयोग के लिए स्तर 3 का दावा किया था, पर जब पिछली तिमाही का वह निर्णय बताने को कहा गया जिसे किसी माप ने सूचित किया, तो केवल छह बता सकीं। कार्यक्रम प्रमुख यह बिना निर्णय सुनाए दर्ज करती है, और यह एक विषय बन जाता है: टीमों के पास डैशबोर्ड हैं और निर्णय दर्ज करने वाली समीक्षाएँ शायद ही होती हैं।
अगले कदम छोटे हैं। आठ टीमें निर्णय-लॉग के साथ मासिक समीक्षा चुनती हैं। चार अपने मापों की परिभाषाएँ लिखना चुनती हैं। तीन चार्टर पर सहमत होना चुनती हैं। छह महीने बाद, सहमत 17 कदमों में से 14 पूरे हैं, एक कारण सहित छोड़ा गया है, और दो चल रहे हैं। दोहराया गया मूल्यांकन दिखाता है कि निर्णय का प्रमाण नमूने के मापों के 38 प्रतिशत से बढ़कर 71 प्रतिशत हो गया, और भरोसा सर्वेक्षण 54 से 67 प्रतिशत सहमति पर पहुँचा। एक टीम पुनर्गठन के बाद भरोसे में पीछे खिसकती है, और सूत्रधार इसे विफलता नहीं, सूचना के रूप में दर्ज करती है। एक साल बाद प्रायोजक वार्षिक रिपोर्ट के लिए फिर एकल अंक माँगता है। कार्यक्रम प्रमुख सीमाओं, तीन विषयों और पूरे किए गए सुधार कदमों के साथ एक पृष्ठ की प्रोफ़ाइल देती है। प्रायोजक स्वीकार करता है, और रिपोर्ट साफ़ कहती है कि पैमाना बातचीत का औज़ार है।
एजाइल, AI, स्वचालन और विश्लेषण
एजाइल
मॉडल को नियमित सुधार समीक्षाओं में बातचीत के रूप में उपयोग करें, जहाँ टीम अपना अगला छोटा कदम स्वयं चुनती है। सावधानी यह है कि दीवार पर टँगा परिपक्वता अंक लक्ष्य बन जाता है।
AI
मूल्यांकन में AI का नज़रिया जोड़ें: क्या AI उपयोगों की सूची है, क्या AI-सहायता प्राप्त मापों के साथ गुणवत्ता-जोड़ियाँ हैं, और क्या लोग AI से निकाली गई संख्याओं को चुनौती दे सकते हैं। सावधानी यह है कि AI से लिखा स्व-मूल्यांकन आत्मविश्वास भरा लग सकता है पर स्थानीय तथ्य चूक सकता है, इसलिए टीम को अपना मूल्यांकन स्वयं लिखना चाहिए।
स्वचालन
मूल्यांकन के लिए प्रमाण का संग्रह स्वचालित करें, जैसे स्वामियों और सुरक्षा-रेखाओं वाले मापों का हिस्सा, पर उसकी व्याख्या लोगों से कराएँ। सावधानी यह है कि अपने-आप जुटाया प्रमाण अधूरा हो सकता है, इसलिए बताएँ कि उसमें क्या शामिल नहीं है।
विश्लेषण
आयामों में प्रोफ़ाइल दिखाएँ, एकल अंक नहीं, हर रेटिंग के पीछे के प्रमाण के साथ। जिस निर्णय को यह सूचित करता है, वह है आगे क्या सुधारें। सावधानी यह है कि रेटिंग आकलित लोगों के ही निर्णय हैं, इसलिए उन पर टीमों की तुलना से बचें।
क्षेत्र का नज़रिया
स्टार्टअप। औपचारिक मूल्यांकन संभवतः अनावश्यक है। छह आयामों पर साल में दो बार की छोटी बातचीत, एक-दो छोटे कदमों के साथ, पर्याप्त है। इस डर पर नज़र रखें कि माप निर्णय सुनाने के लिए उपयोग होंगे, क्योंकि छोटी टीमें इसे तीव्रता से महसूस करती हैं।
छोटा व्यवसाय। आयामों को मालिक और कर्मचारियों से बातचीत की जाँच-सूची की तरह उपयोग करें। पूछें कि आप जो थोड़े माप रखते हैं वे असली प्रश्नों का उत्तर देते हैं या नहीं, लोग उनका अर्थ जानते हैं या नहीं, और उनका उपयोग होता है या नहीं। एक कदम चुनें। एक घंटे से अधिक न लगाएँ।
उद्यम। बड़े पैमाने पर एक हल्की, सुसंगत प्रक्रिया चाहिए: वही आयाम, सूत्रधार के साथ स्व-मूल्यांकन, अंशांकन सत्र और समेकित प्रोफ़ाइलें। केंद्रीय अंक-निर्धारण कार्यालय का विरोध करें। अगले कदमों को सुधार रजिस्टरों से जोड़ें, और प्रायोजकों को सीमाएँ और विषय बताएँ। पैमाने के अनुपालन की कवायद बन जाने से सावधान रहें।
सरकार और सार्वजनिक क्षेत्र। ऑडिट और निरीक्षण निकाय परिपक्वता अंक माँग सकते हैं। इस आंतरिक बातचीत के औज़ार और किसी भी औपचारिक ढाँचे के बीच का अंतर स्पष्ट रखें। टीमों के परिणाम टीमों के पास रखें, निरीक्षण को समेकित रूप दें, और पारदर्शी रहें कि पैमाना क्या है और क्या नहीं (देखें विषय 8.3, अनुपालन और ऑडिट मीट्रिक्स)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
लागतें छोटी हैं: साल में दो बार प्रति टीम एक-दो घंटे, एक सूत्रधार, कुछ विश्लेषण, और सुधार कदमों को पूरा करने का प्रयास। बड़ी लागतें तब आती हैं जब मॉडल का दुरुपयोग होता है, सलाहकारों, अंक-निर्धारण कार्यालयों और प्रमाणों के बाइंडरों के साथ।
प्रतिफल प्रयास को बेहतर निशाने पर लगाने से आते हैं। सभी आयामों में निवेश फैलाने के बजाय, कार्यक्रम सीमित करने वाले आयाम को खोजता है और उसे संबोधित करता है। अन्य प्रतिफलों में पीछे लौटने की जल्दी पहचान, टीमों के बीच साझा भाषा, और टीमों के चुने तथा अपनाए गए सुधार कदम शामिल हैं। औचित्य अपने डेटा से बनाएँ: पूरे किए गए सुधार कदम, निर्णय के प्रमाण और भरोसा सर्वेक्षण परिणामों में बदलाव, और मूल्यांकन में लगा प्रयास। परिपक्वता सुधार के प्रतिफल के बारे में प्रकाशित दावों को बिना पता लगाने योग्य स्रोत और अपने संदर्भ से प्रासंगिकता के उद्धृत करने से बचें (देखें विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य)।
प्रतिरूप-विरोधी और जाल
- परिपक्वता का बिल्ला। स्तर लक्ष्य बन जाता है। इसे प्रमाण सहित बातचीत के रूप में उपयोग करें।
- एक सकल संख्या। पैटर्न खो जाता है और लक्ष्य उभर आते हैं। प्रोफ़ाइल दिखाएँ।
- ऑडिटरों द्वारा अंक-निर्धारण। टीमें प्रदर्शन के लिए दस्तावेज़ तैयार करती हैं। सूत्रधार के साथ स्व-मूल्यांकन उपयोग करें।
- अंक को निधि से जोड़ना। इसके बाद फुलाना आता है। मूल्यांकन को अलग रखें।
- शीर्ष स्तर का पीछा। हर कार्यक्रम को समन्वयन की ज़रूरत नहीं। जो अनुकूल हो वह चुनें।
- मूल्यांकन करो और भूल जाओ। कोई कदम नहीं उठता। कदमों को सुधार रजिस्टर से जोड़ें।
- अत्यधिक लंबा मूल्यांकन। बोझ बढ़ता है और गुणवत्ता गिरती है। इसे एक घंटे तक रखें।
- पीछे लौटने की अनदेखी। बदलाव के बाद कार्यक्रम फिसल जाते हैं। लय में और घटनाओं के बाद पुनर्मूल्यांकन करें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वयन |
|---|---|---|---|---|---|
| प्रश्न और उद्देश्य | माप इसलिए इकट्ठे होते हैं कि डेटा मौजूद है | कुछ टीमें अपने पूछे प्रश्न बताती हैं | श्रोता और प्रश्न लिखे हुए; माप उनसे जुड़े | प्रश्नों के कवरेज की समीक्षा; अनुत्तरित प्रश्न नए माप चलाते हैं | ग्राहकों और आपूर्तिकर्ताओं सहित श्रोता मापों को आकार देते हैं; प्रश्न सेवाओं के साथ विकसित होते हैं |
| परिभाषाएँ और स्वामित्व | परिभाषाएँ व्यक्ति के अनुसार बदलती हैं | कुछ लिखी हुई; अनौपचारिक स्वामी | हर माप के लिए परिभाषा, स्रोत, स्वामी और सीमाओं वाला सूचीपत्र | परिभाषा की पूर्णता और चुनौतियाँ प्रबंधित | परिभाषाएँ टीमों और आपूर्तिकर्ताओं में सह-स्वामित्व वाली; निर्णयों को सूचित करना बंद करने पर संशोधित |
| डेटा और औज़ार | हाथ से और नाज़ुक | कुछ स्वचालित फ़ीड | परीक्षित पाइपलाइनें, साझा भंडार, पोर्टेबल डेटा | विश्वसनीयता, मिलान और निकास-तत्परता प्रबंधित | साझा अनुबंधों वाली संघीय पाइपलाइनें; प्रतिक्रिया से स्रोत बेहतर |
| निर्णयों में उपयोग | संख्याएँ प्रदर्शित, शायद ही उपयोग | कुछ समीक्षाओं में उपयोग | नियमित समीक्षाएँ जो निर्णय दर्ज करती हैं | निर्णय का प्रमाण ट्रैक और उस पर कार्रवाई | निर्णय टीमों के आर-पार परिणामों से जुड़े; सीख साझा |
| भरोसा और सुरक्षा | भय या उदासीनता | मौखिक आश्वासन | लिखित चार्टर; व्यक्तिगत दृश्य बंद; सुरक्षा सर्वेक्षण | उल्लंघनों की खुली समीक्षा; स्पष्टवादिता के संकेत प्रबंधित | भरोसा नियमित; कार्यक्रम कर्मचारियों और भागीदारों द्वारा आकारित |
| समीक्षा और विकास | कोई नहीं | कभी-कभार सफ़ाई | टीमों के साथ आवधिक समीक्षा; सेवानिवृत्ति नियम | मूल्यांकन के कदम निधिबद्ध और पूरे | कार्यक्रम सबके बदलावों के साथ निरंतर सुधरता है |
जाँच-सूची
- छह आयाम सहमत हैं, और स्तर-वर्णन हमारे संदर्भ के अनुसार ढाले गए हैं।
- हर टीम सूत्रधार के साथ लगभग एक घंटे की चर्चा में स्वयं का मूल्यांकन करती है।
- दावा किया गया हर स्तर किसी उदाहरण या नमूना-जाँच से समर्थित है।
- परिणाम प्रोफ़ाइल और सीमाओं के रूप में दिखाए जाते हैं, कभी एक औसत अंक या रैंकिंग के रूप में नहीं।
- टीम के परिणाम टीम के पास रहते हैं, और समेकित रूप प्रायोजकों से साझा किया जाता है।
- मूल्यांकन निधि, हैसियत या प्रदर्शन समीक्षाओं से नहीं जुड़ा है, और यह लिखित है।
- हर टीम स्वामी और तिथि के साथ एक-दो छोटे अगले कदमों पर सहमत होती है।
- अगले कदम सुधार रजिस्टर में ट्रैक किए जाते हैं।
- पुनर्मूल्यांकन साल में कम से कम दो बार और बड़ी घटनाओं के बाद होता है।
- मॉडल की स्वयं हर वर्ष टीमों के साथ समीक्षा होती है।
AI प्रॉम्प्ट
स्व-मूल्यांकन बातचीत तैयार करें।
छह आयामों में किसी टीम के अपने मीट्रिक्स कार्यक्रम के स्व-मूल्यांकन के लिए एक घंटे की
सूत्रधार योजना तैयार करें: प्रश्न और उद्देश्य, परिभाषाएँ और स्वामित्व, डेटा और औज़ार,
निर्णयों में उपयोग, भरोसा और सुरक्षा, तथा समीक्षा और विकास। पाँच स्तरों का उपयोग करें:
आरंभ, विकास, मानकीकरण, प्रबंधन, समन्वयन। इसमें निजी चिह्नांकन, तुलना, प्रमाण के प्रश्न
और एक-दो छोटे अगले कदमों पर सहमति शामिल करें। कोई अंक न दें। अपनी मान्यताएँ सूचीबद्ध करें।
कमज़ोर आयाम को कदमों में बदलें।
हमारी टीम अपने मीट्रिक्स कार्यक्रम के [आयाम] पर स्वयं को स्तर [n] पर आँकती है। प्रमाण:
[यहाँ चिपकाएँ]। तीन छोटे कदम सुझाएँ, हर एक एक तिमाही में पूरा होने योग्य, जो हमें
स्तर [n+1] की ओर ले जा सकें। हर कदम के लिए स्वामी, प्रयास, संभावित लाभ और यह बताएँ कि
हमें कैसे पता चलेगा कि वह कारगर रहा। परिणामों का वादा न करें। अपनी मान्यताएँ और
जोखिम सूचीबद्ध करें।
दावा किए गए स्तर के प्रमाण की जाँच करें।
कोई टीम [आयाम] पर स्तर [n] का दावा करती है और यह प्रमाण देती है: [यहाँ चिपकाएँ]।
जिज्ञासु सहकर्मी की भूमिका निभाएँ। ऐसे प्रश्न सूचीबद्ध करें जो परखें कि प्रमाण दावे का
समर्थन करता है या नहीं, कौन-से उदाहरण विश्वसनीय होंगे, और कौन-से संकेत सुझाएँगे कि दावा
आशावादी है। टीम पर निर्णय न सुनाएँ। अपनी मान्यताएँ सूचीबद्ध करें।
रैंकिंग के बिना प्रोफ़ाइलों का सारांश बनाएँ।
यहाँ हर आयाम के लिए हर स्तर पर टीमों की समेकित गिनतियाँ हैं: [यहाँ चिपकाएँ]। प्रायोजकों
के लिए आधे पृष्ठ का सारांश लिखें जिसमें सीमा, तीन साझा विषय और टीमों द्वारा चुने गए सुधार
कदमों का वर्णन हो। टीमों को रैंक न करें, एकल अंक न बनाएँ, और प्रमाण के बिना कारणों का
दावा न करें। स्व-मूल्यांकन के बारे में सावधानियाँ सूचीबद्ध करें।
AI स्किल
- Service Management Metrics skill: कार्यक्रम के मापों को परिपक्वता आयामों और उनकी जोड़ी गई सुरक्षा-रेखाओं से जोड़ने के लिए उपयोग करें।
- Service Management Metrics maintainer skill: यह जाँचने के लिए उपयोग करें कि परिपक्वता मूल्यांकन प्रोफ़ाइल बताता है, परिणाम टीमों के पास रखता है और एकल अंक से बचता है।
मुख्य निष्कर्ष
- साझा पाँच-स्तरीय पैमाने को बातचीत के औज़ार के रूप में उपयोग करें, कभी बिल्ले, रैंकिंग या प्रमाणन के रूप में नहीं।
- एक औसत अंक नहीं, छह आयामों में प्रोफ़ाइल बताएँ।
- टीमों के साथ मूल्यांकन करें, प्रमाण माँगें, और हर टीम के परिणाम उसी टीम के पास रखें।
- उस आयाम में छोटे अगले कदम चुनें जो बाकी को सीमित करता है, अक्सर भरोसा और परिभाषाएँ।
- कदमों को सुधार रजिस्टर में ट्रैक करें, और नियमित रूप से पुनर्मूल्यांकन करें क्योंकि कार्यक्रम पीछे लौटते हैं।
- ऊँचा हमेशा बेहतर नहीं होता, और परिणाम स्तरों से अधिक मायने रखते हैं।
संदर्भ और आगे का अध्ययन
- Paulk, M., et al., Capability Maturity Model for Software, Version 1.1, Software Engineering Institute, Carnegie Mellon University, 1993.
- Axelos, ITIL 4: Direct, Plan and Improve, 2020.
- ISO/IEC 33001, Information technology: Process assessment: Concepts and terminology, International Organization for Standardization, 2015.
- Imai, M., Kaizen: The Key to Japan's Competitive Success, McGraw-Hill, 1986.
- Muller, J., The Tyranny of Metrics, Princeton University Press, 2018.
- Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
- Wikipedia, Capability Maturity Model.
- Wikipedia, Kaizen.
- Wikipedia, Continual improvement process.
- Wikipedia, Goodhart's law.
- Wikipedia, Vanity metric.