मूल्य की प्राप्ति और व्यावसायिक परिणाम
परिवर्तन डिलीवर करना और संगठन को उससे लाभ होना एक ही बात नहीं है, इसलिए बनाने से पहले अपेक्षित लाभ बताएँ, रिलीज़ के बाद उन लोगों के साथ उसकी जाँच करें जिन्हें लाभ होना था, और ईमानदार रहें कि किसी भी सुधार का कितना हिस्सा आप अपने काम को दे सकते हैं।
अवलोकन और प्रेरणा
एजाइल कार्य-पद्धतियाँ चालू सॉफ़्टवेयर को पहले रखती हैं और हितधारकों को पूरे समय सहयोग में रखती हैं, ताकि जो शिप हो वही हो जो लोगों को चाहिए। IT सेवा प्रबंधन (ITSM), जैसा ITIL में संहिताबद्ध है, उसी चिंता को मूल्य के रूप में गढ़ता है: सेवा तब मूल्यवान है जब वह ग्राहकों को वे परिणाम पाने में मदद करे जो वे चाहते हैं, उन लागतों और जोखिमों के साथ जो वे स्वीकार करते हैं। दोनों परंपराएँ एक असहज प्रश्न पर मिलती हैं। एक साल बाद, क्या लोग और संगठन इस कारण बेहतर स्थिति में हैं कि इस टीम ने जो बनाया और चलाया?
इसका उत्तर देना यह गिनने से कठिन है कि क्या डिलीवर हुआ। फ़ीचर शिप होती हैं और कोई उनका उपयोग नहीं करता। घटनाएँ टीम के काम से असंबद्ध कारणों से घटती हैं। लागत की बचत स्लाइड पर दिखती है, और जिस बजट से आई वह कहीं और खर्च हो जाता है। यह विषय उस अंतर को बंद करने के बारे में है, और यह सीधे पुस्तक के आरंभ में पेश किए परिणाम पर ध्यान से जुड़ता है (देखें विषय 1.3, उत्पादन से ऊपर परिणाम: क्या मापें, यह चुनना)।
चार विचार विषय को संगठित करते हैं।
- लाभ। लाभ मापने योग्य सुधार है जिसकी हितधारक क़द्र करता है, जैसे किसी काम पर कम समय, कम त्रुटियाँ, अधिक ग्राहकों की सेवा, या कम जोखिम। फ़ीचर लाभ नहीं है। वह साधन है। लाभ की प्राप्ति का प्रबंधन (benefits realization management) लाभ पहचानने, स्वामी तय करने, और जाँचने का अनुशासन है कि वे पहुँचते हैं।
- मूल्य की परिकल्पना। बनाने से पहले टीम लिखती है कि वह क्या बदलने की अपेक्षा करती है, किसके लिए, कितना, और वह कैसे बताएगी। यह परखने योग्य दावा है, और ग़लत हो सकता है। परिवर्तन का सिद्धांत (theory of change) या लॉजिक मॉडल (logic model) गतिविधियों से आउटपुट और परिणामों तक की कड़ी रखता है, जो परिकल्पना को स्पष्ट बनाने में मदद करता है।
- अग्रणी और पश्चगामी संकेतक। अग्रणी संकेतक (leading indicator) जल्दी हिलता है और परिणाम की भविष्यवाणी करता है, जैसे नई प्रक्रिया का अपनाया जाना। पश्चगामी संकेतक (lagging indicator) परिणाम की बाद में पुष्टि करता है, जैसे प्रति लेन-देन घटी लागत। दोनों उपयोग करें: अग्रणी संकेतक आपको मार्ग सुधारने देते हैं, और पश्चगामी संकेतक बताते हैं कि क्या काम किया।
- आरोपण। बहुत सी चीज़ें एक साथ बदलती हैं। यह कहने के लिए कि आपके काम से सुधार हुआ, आपको तुलना चाहिए: आधार, तुलना का समूह, या पहले-और-बाद की रचना जो अन्य बदलावों का हिसाब रखे। उसके बिना मूल्य के दावे कहानियाँ हैं। ईमानदार स्थिति अक्सर "से जुड़ा" है, "के कारण" नहीं।
उद्देश्य और मुख्य परिणाम (objectives and key results) (OKR) जैसे लक्ष्य के ढाँचे टीम के काम को व्यावसायिक परिणामों से जोड़ सकते हैं, और मापन के ढाँचों पर पहले का विषय उन्हें विस्तार से कवर करता है (देखें विषय 1.7, मापन ढाँचे)। हर ढाँचे का जोखिम वही है जो गुडहार्ट का नियम (Goodhart's law) नामित करता है: लाभ की संख्या के लक्ष्य बन जाने पर लोग लाभ के बिना संख्या बनाने के तरीके खोज लेते हैं (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)।
विषय पैसे की ओर भी पुल बनाता है। अगले भाग का निवेश पर प्रतिफल और व्यावसायिक औचित्य का विषय वित्तीय दृष्टिकोण गहराई से लेता है (देखें विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य)। यहाँ ध्यान परिणामों के प्रमाण पर है, जो उस औचित्य को खिलाता है।
मुख्य सिद्धांत
- बनाने से पहले अपेक्षित लाभ लिखें। जिस दावे की बाद में जाँच नहीं हो सकती उससे सीखा नहीं जा सकता।
- हर लाभ के लिए स्वामी नामित करें। स्वामी वह हितधारक है जो बदलाव देखेगा, डिलीवरी टीम नहीं।
- रिलीज़ के बाद उपयोगकर्ताओं पर मापें। डिलीवरी जाँच की शुरुआत है, अंत नहीं।
- दिशा लेने के लिए अग्रणी और पुष्टि के लिए पश्चगामी संकेतक उपयोग करें।
- आरोपण पर ईमानदार रहें। बताएँ कि और क्या बदला, और ऐसे दावों से बचें जिन्हें प्रमाण सहारा नहीं दे सकता।
- जो लाभ नहीं आए उन्हें गिनें। विफल परिकल्पना से सीखना इस तरह काम करने का लाभ है।
- सहयोग जारी रखें। हितधारक और टीम प्रमाण की समीक्षा साथ, नियमित रूप से करते हैं।
मीट्रिक परिभाषाएँ
| मीट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL प्रैक्टिस | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| लाभ की प्राप्ति की दर | अपेक्षित लाभों का हिस्सा जो सहमत समीक्षा की तिथि पर देखे गए | सहमत सीमा पर या ऊपर मापे परिणाम वाले लाभ / अवधि में समीक्षा की तिथि वाले अपेक्षित लाभ | प्रतिशत | स्वामियों, आधारों और समीक्षा की तिथियों वाला लाभ का रजिस्टर | सतत सुधार; सेवा मूल्य प्रणाली का शासन | हितधारकों के साथ परिणाम की समीक्षा | त्रैमासिक |
| पहले मूल्य का समय | काम की शुरुआत से उपयोगकर्ताओं के लिए पहले मापने योग्य लाभ तक का समय | पहला काम शुरू होने से उस पहली तिथि तक के दिन जब लाभ का संकेतक अपेक्षा के अनुसार हिला | दिन | काम का ट्रैकर और लाभ का संकेतक | सेवा डिज़ाइन; रिलीज़ और डिप्लॉयमेंट प्रबंधन | मूल्य की निरंतर डिलीवरी | प्रति पहल |
| परिकल्पना की जाँच की दर | रिलीज़ हुए परिवर्तनों का हिस्सा जिनकी बताई मूल्य की परिकल्पना रिलीज़ के बाद जाँची गई | दर्ज रिलीज़-पश्चात जाँच वाले परिवर्तन / परिकल्पना वाले रिलीज़ हुए परिवर्तन | प्रतिशत | रिलीज़ के रिकॉर्डों से जुड़ा परिकल्पना का लॉग | सतत सुधार; परिवर्तन सक्षमीकरण | रिलीज़ हुए काम से सीखना | मासिक |
| प्रमाण की गुणवत्ता का हिस्सा | दावा किए लाभों का हिस्सा जिनका आधार और तुलना की बताई विधि है | आधार और विधि वाले लाभ के दावे / रिपोर्ट किए लाभ के दावे | प्रतिशत | लाभ के रजिस्टर की समीक्षा | माप और रिपोर्टिंग | परिणामों की ईमानदार रिपोर्टिंग | त्रैमासिक |
| परिणाम के संकेतक में गति | चुने परिणाम के संकेतक में उसके आधार की तुलना में, और जहाँ उपलब्ध हो वहाँ तुलना के साथ, बदलाव | (पहले का संकेतक घटा बाद का संकेतक) तुलना के समूह के बदलाव के साथ रिपोर्ट | संकेतक की इकाइयाँ | उत्पाद विश्लेषण, सेवा का डेटा, वित्त | सेवा-स्तर प्रबंधन; सतत सुधार | मुख्य परिणाम की प्रगति | मासिक |
| व्यावसायिक प्रभाव के घंटे | वे घंटे जिनमें सेवा की समस्याओं के कारण व्यावसायिक प्रक्रिया बिगड़ी या रुकी | प्रक्रिया के स्वामियों द्वारा IT सेवा के कारणों को दिए बिगड़ी या रुकी प्रक्रिया के घंटे | घंटे | प्रक्रिया के स्वामी की पुष्टि से जुड़े घटना के रिकॉर्ड | घटना प्रबंधन; उपलब्धता प्रबंधन | व्यावसायिक प्रभाव की समीक्षा | मासिक |
| परिणाम से जुड़ी क्षमता का हिस्सा | टीम की क्षमता का हिस्सा जो बताए परिणाम से जुड़े काम पर खर्च हुआ | दर्ज परिणाम से जुड़ी मदों पर क्षमता / कुल क्षमता | प्रतिशत | परिणाम के फ़ील्ड वाला काम का ट्रैकर | सेवा मूल्य प्रणाली; पोर्टफ़ोलियो शासन | उत्पाद के लक्ष्य से संरेखित काम | त्रैमासिक |
हर लाभ दर्ज करते समय समीक्षा की तिथि और सीमा परिभाषित करें, बाद में नहीं। पहले मूल्य का समय काम शुरू होने पर शुरू होता है और तब रुकता है जब संकेतक बताई मात्रा से अपेक्षित दिशा में पहली बार हिले, जो रिलीज़ के काफ़ी बाद हो सकता है। व्यावसायिक प्रभाव के घंटों का आरोपण प्रक्रिया के स्वामी के साथ सहमत होता है, और विवाद लॉग होते हैं।
सिफ़ारिशें
बनाने से पहले: दावे को जाँचने योग्य बनाएँ
1. हर महत्वपूर्ण परिवर्तन के लिए मूल्य की परिकल्पना लिखें। सादे रूप का उपयोग करें: "हम मानते हैं कि [परिवर्तन] [किसकी] [क्या करने में] मदद करेगा ताकि [मापने योग्य सुधार]। हमें [संकेतक] के [आधार] से [अपेक्षित] तक जाने से पता चलेगा, [तिथि] को समीक्षित।" उसे इतना छोटा रखें कि बोर्ड पर कार्ड पर आ जाए। जो टीमें खाली जगहें नहीं भर पातीं, उन्होंने अक्सर अभी समस्या को समझा नहीं होता।
2. आधार दर्ज करें। बिना पहले के कोई बाद नहीं होता। संकेतक का वर्तमान मान, वह कैसे मापा गया, और वह कितना बदलता है, दर्ज करें। यदि संकेतक शोर वाला है तो एकल संख्या भ्रमित करती है, इसलिए कई सप्ताहों की सीमा दर्ज करें (देखें विषय 1.6, सेवा मीट्रिक्स के लिए सांख्यिकीय साक्षरता)।
3. अग्रणी और पश्चगामी संकेतक चुनें। नए सेल्फ़-सर्विस अनुरोध के लिए अग्रणी संकेतक यह है कि कितने पात्र उपयोगकर्ता उसे पूरा करते हैं, और पश्चगामी संकेतक हाथ की हैंडलिंग के घंटों में गिरावट है (देखें विषय 6.3, सेवा अपनाने और कैटलॉग के मीट्रिक्स)। सहमत हों कि कौन-सा संकेतक कब जाँचा जाता है। अग्रणी संकेतक तिमाही समाप्त होने की प्रतीक्षा किए बिना बीच में सुधार करने देते हैं।
4. डिलीवरी टीम के बाहर का लाभ का स्वामी नामित करें। स्वामी वह हितधारक है जो अपने क्षेत्र में सुधार देखेगा और उसे आँक सकता है। डिलीवरी टीम मापन में सहायता करती है पर अपनी कॉपी स्वयं नहीं जाँचती। यह व्यवहार में निरंतर सहयोग है: जिसने परिणाम चाहा वह पुष्टि होने तक जुड़ा रहता है।
रिलीज़ के बाद: ईमानदारी से जाँचें
5. सहमत तिथि पर परिकल्पना की समीक्षा करें। स्वामी और टीम के साथ संक्षिप्त समीक्षा रखें। संकेतक, आधार और तुलना देखें। रजिस्टर में परिणाम दर्ज करें: पूरा, आंशिक पूरा, पूरा नहीं, या कह नहीं सकते। "कह नहीं सकते" वैध परिणाम है और माप सुधारने का संकेत।
6. जहाँ हो सके तुलना उपयोग करें। सबसे मज़बूत तुलना नियंत्रित प्रयोग है। A/B परीक्षण (A/B testing) उपयोगकर्ताओं को यादृच्छिक रूप से सौंपकर दो संस्करणों की तुलना करता है, और पर्याप्त ट्रैफ़िक वाली डिजिटल सेवाओं के लिए अच्छा काम करता है। जहाँ यादृच्छिकीकरण संभव नहीं, वहाँ चरणबद्ध रोलआउट आपको उन समूहों की तुलना करने देता है जिन्हें बदलाव मिला और जिन्हें नहीं। अंतरों में अंतर (difference-in-differences) की विधि उपचारित समूह के बदलाव की तुलना उसी अवधि में अनुपचारित समूह के बदलाव से करती है, जो साझा रुझान हटाती है। सबसे सरल रचना उपयोग करें जो फिट हो।
7. भ्रमित करने वाले कारक खोजें। भ्रमित करने वाला कारक (confounding) कुछ और है जो बदला और परिणाम समझा सकता है: मौसमी पैटर्न, नई नीति, अनुरोधों का अलग मिश्रण। प्रभाव का दावा करने से पहले संभव कारकों को सूचीबद्ध करें। यदि आप उन्हें खारिज नहीं कर सकते, तो वही कहें जो प्रमाण सहारा देता है, उससे अधिक नहीं।
8. नकारात्मक और शून्य परिणाम रिपोर्ट करें। जब परिवर्तन ने मदद नहीं की, तो ऐसा कहें और दर्ज करें कि क्या सीखा गया। उत्तरजीविता का पक्षपात (survivorship bias), केवल सफलताओं को देखने की आदत, कार्यक्रमों को उससे बेहतर दिखाता है जितने वे हैं। जिस रजिस्टर में केवल जीत हैं वह ईमानदारी से नहीं रखा गया।
कार्यक्रम को ईमानदार रखें
9. प्रमाण की गुणवत्ता को लाभ से अलग करें। दावों का वह हिस्सा ट्रैक करें जिनका आधार और बताई विधि है। कमज़ोर प्रमाण वाला बड़ा दावा वैसा ही पढ़ा जाना चाहिए। स्वस्थ रजिस्टर मज़बूत प्रमाण वाले मामूली दावे और कुछ ईमानदार "कह नहीं सकते" प्रविष्टियाँ दिखाता है।
10. क्षमता को परिणामों से ढीले ढंग से जोड़ें। पूछें कि टीम के काम का कितना हिस्सा बताए परिणाम से जुड़ा है, और बाकी को देखें। कुछ काम, जैसे सुरक्षा के सुधार या सेवा चालू रखना, का कोई नया लाभ नहीं है, और वह ठीक है यदि उसका नाम लिया जाए। उद्देश्य भटकाव नोटिस करना है, हर काम को लाभ की कहानी में मजबूर करना नहीं।
11. आपके उपयोग किए लक्ष्य के ढाँचे से जोड़ें। यदि आप OKR उपयोग करते हैं, तो मुख्य परिणामों को परिणाम के संकेतक बनाएँ और हितधारकों के साथ उनकी समीक्षा करें। मुख्य परिणाम परिणामों के बारे में रखें, कामों के नहीं, और महत्वाकांक्षी लक्ष्यों के लिए जगह छोड़ें जो पूरे न भी हों। मुख्य परिणामों को व्यक्तिगत लक्ष्य न बनाएँ (देखें विषय 1.7, मापन ढाँचे)।
12. परियोजना के साथ पोर्टफ़ोलियो की भी समीक्षा करें। हर तिमाही पहलों में देखें कि कौन-से लाभ पहुँचे, कौन-से नहीं, और पैटर्न बताता है कि टीम काम का अनुमान और चयन कैसे करती है। इसका उपयोग परिकल्पनाएँ लिखने का तरीका सुधारने में करें, टीमों को रैंक करने में नहीं।
गेमिंग के रास्ते और सुरक्षा-रेखाएँ
| मीट्रिक | इसमें गेमिंग कैसे होती है | जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा |
|---|---|---|
| लाभ की प्राप्ति की दर | कम सीमाएँ तय करना; समीक्षा की तिथि खिसकाना; बाद में लाभ को पुनः-परिभाषित करना | अनुमोदन पर तय सीमा और तिथि; प्रमाण की गुणवत्ता का हिस्सा; डिलीवरी टीम के बाहर का स्वामी |
| पहले मूल्य का समय | ऐसा जल्दी वाला संकेतक चुनना जो ग़लत कारण से हिलता है; घड़ी देर से शुरू करना | रजिस्टर में परिभाषित संकेतक और घड़ी; लाभ के स्वामी से पुष्टि |
| परिकल्पना की जाँच की दर | अस्पष्ट परिकल्पनाएँ लिखना जो हमेशा पास हों; केवल सफल परिवर्तनों को जाँचना | परीक्षण योग्यता के लिए परिकल्पनाओं का नमूना; समीक्षा में शून्य और विफल परिणाम शामिल करें |
| प्रमाण की गुणवत्ता का हिस्सा | आधार बाद में भरना; किसी भी तुलना को विधि बताना | परिवर्तन से पहले की तिथि का आधार; टीम के बाहर के किसी से समीक्षा |
| परिणाम के संकेतक में गति | अनुकूल अवधि या समूह चुनना; भ्रमित करने वाले कारकों को अनदेखा करना | पहले से दर्ज अवधि और समूह; विचार किए भ्रमित करने वाले कारकों की सूची |
| व्यावसायिक प्रभाव के घंटे | प्रक्रिया के स्वामी आरोपण फुलाते या घटाते हैं; आरोपण से बचने के लिए घटनाएँ पुनर्वर्गीकृत | आरोपण के नियम लिखित और लॉग; घटना और उपलब्धता के रिकॉर्डों से तुलना |
| परिणाम से जुड़ी क्षमता का हिस्सा | सारे काम को सामान्य परिणाम से टैग करना; नियमित काम के लिए परिणाम गढ़ना | हितधारकों के साथ परिणामों की सूची समीक्षित; कड़ी की गुणवत्ता के लिए मदों का नमूना |
स्वस्थ पठन ऐसा रजिस्टर है जिसमें कुछ लाभ पूरे हुए, कुछ नहीं, कुछ अस्पष्ट हैं, और हर प्रविष्टि का आधार, स्वामी और बताई विधि है। एकसमान सफलता का रजिस्टर संदेह से देखा जाना चाहिए।
समझौते: लाभ और हानि
| तरीका | ताकत | कमज़ोरी |
|---|---|---|
| औपचारिक लाभ का रजिस्टर | जवाबदेही, पहलों में सीखना | हर छोटे परिवर्तन पर लागू हो तो नौकरशाही |
| हर कार्ड पर हल्की परिकल्पना | सस्ती, आदत बनाती है | अस्पष्ट लिखना आसान |
| नियंत्रित प्रयोग | कारण का मज़बूत प्रमाण | ट्रैफ़िक, समय, और सेवा में फिट होने वाली रचना चाहिए |
| केवल पहले-और-बाद | सरल, तेज़ | अन्य बदलावों से भ्रमित |
| हितधारक का विवेक | वह मूल्य पकड़ता है जो माप चूकते हैं | आशावाद और राजनीति के अधीन |
| अग्रणी संकेतक | जल्दी मार्ग का सुधार | वास्तविक परिणाम की भविष्यवाणी न कर सकें |
| पश्चगामी संकेतक | वास्तविक परिणामों की पुष्टि करते हैं | देर से आते हैं; कई कारण |
सीधा उत्तर है कि प्रमाण का भार परिवर्तन के आकार और जोखिम से मिलाएँ। छोटे बदलावों के लिए हल्की परिकल्पना और सरल पहले-और-बाद उपयोग करें, और बड़े बदलावों के लिए प्रयोग या चरणबद्ध रोलआउट। हमेशा दर्ज करें कि आपने क्या अपेक्षा की, क्या हुआ, और आप कितने निश्चित हैं।
अपनी टीम के साथ चर्चा के प्रश्न
1. पिछली तिमाही में हमने क्या शिप किया, और जिन लोगों की मदद करनी थी उनके लिए क्या बदला? मुख्य बदलाव सूचीबद्ध करें और हर एक के लिए उस व्यक्ति का नाम लें जो अंतर नोटिस करेगा। पूछें कि वे क्या कहेंगे। सूत्रधार ऐसे बदलाव नोट करे जहाँ कोई उत्तर नहीं दे सकता, क्योंकि वे रिलीज़ के बाद की जाँच के उम्मीदवार हैं। एक महीने के भीतर स्वामी के साथ समीक्षा के लिए एक बदलाव पर सहमत हों।
2. हमारे अगले महत्वपूर्ण परिवर्तन के लिए मूल्य की परिकल्पना क्या है और हमें कैसे पता चलेगा? परिकल्पना का फ़ॉर्म साथ भरें। अस्पष्ट शब्दों और लापता आधारों को चुनौती दें। पूछें कि कौन-सा परिणाम टीम को अपनी योजनाएँ बदलने पर मजबूर करेगा। यदि समूह माप पर सहमत नहीं हो सकता, तो वह बनाने से पहले खोज का काम है।
3. लाभ का स्वामी कौन है, और क्या वे कमरे में हैं? जाँचें कि हर लाभ का स्वामी डिलीवरी टीम के बाहर है। पूछें कि स्वामी कितनी बार प्रमाण देखता है। जहाँ स्वामी स्वयं टीम है, वहाँ चर्चा करें कि विवेक और किसे साझा करना चाहिए। बातचीत हितधारकों के बीच निरंतर सहयोग का समर्थन करती है।
4. जब संख्याएँ सुधरीं तब और क्या बदला? हाल के दावा किए सुधार को लें और उसी अवधि में अन्य बदलाव सूचीबद्ध करें: नीति, मौसमीयता, कर्मचारी-व्यवस्था, किसी अन्य टीम की रिलीज़। पूछें कि कौन परिणाम समझा सकता है। तय करें कि सुधार को बदलाव के कारण, उससे जुड़ा, या अस्पष्ट बताएँ।
5. हमारी पिछली कौन-सी परिकल्पनाएँ ग़लत निकलीं, और हमने उसके बारे में क्या किया? विफल अपेक्षा की कहानी माँगें। यदि जल्दी कोई नहीं आती, तो टीम जाँच नहीं कर रही हो सकती, या उसके बारे में बात नहीं कर रही। चर्चा करें कि शून्य परिणाम की रिपोर्टिंग को सुरक्षित और उपयोगी कैसे बनाया जाए।
6. हमारी क्षमता का कितना हिस्सा परिणाम से जुड़ा है, और क्या वह सही लगता है? पूरे हुए काम का एक महीना देखें और हर मद को परिणाम या "सेवा चालू रखना" से टैग करें। पूछें कि क्या विभाजन वह है जो नेता सोचते हैं। बिना परिणाम वाले काम पर चर्चा करें और क्या उसे जारी रहना चाहिए।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
डिलीवरी टीमें परिकल्पना और मापन की योजना की स्वामी हैं, और उन्हें बदलाव छोटे चरणों में डिलीवर करने चाहिए ताकि प्रमाण जल्दी आए। उन्हें संकेतक परिवर्तन में बनाना चाहिए, उदाहरण के लिए जिन घटनाओं की उन्हें ज़रूरत है उन्हें लॉग करके, और लाभ के स्वामी से पुष्टि करवानी चाहिए कि वे क्या देखते हैं। टीमों को विफल परिकल्पनाओं का सूचना के रूप में स्वागत करना चाहिए, क्योंकि जल्दी सीखना ग़लत चीज़ और बनाने की लागत बचाता है।
सेवा और संचालन टीमें
संचालन टीमें घटनाओं, अनुरोधों और क्षमता पर परिवर्तनों का असली प्रभाव देखती हैं। पश्चगामी संकेतकों, जैसे हाथ की हैंडलिंग के घंटे और दोहराए संपर्क, का बहुत सा डेटा उनके पास है, और उन्हें परिवर्तन सोखने के साथ परिकल्पनाओं की जाँच में भी मदद करनी चाहिए। जब काग़ज़ पर दावा किए लाभ वह नहीं हैं जो सर्विस डेस्क देखता है, तो उन्हें बोलना चाहिए।
नेतृत्व और शासन
नेता चुनते हैं कि लाभ सीखने का औज़ार है या बिक्री का भाषण। उन्हें आधार और विधियाँ माँगनी चाहिए, ईमानदार "पूरा नहीं" परिणामों का स्वागत करना चाहिए, और तथ्य ज्ञात होने से पहले तय लाभ की संख्याओं से टीमों को बाँधने से बचना चाहिए। शासन को रजिस्टर की समीक्षा पोर्टफ़ोलियो के रूप में करनी चाहिए, मापन को वित्त देना चाहिए, और उस काम को रोकने को तैयार रहना चाहिए जिसकी परिकल्पना विफल हो गई।
ग्राहक और उपयोगकर्ता
उपयोगकर्ता जानते हैं कि परिवर्तन ने मदद की या नहीं, और वे अधिकांश लाभों के सबसे अच्छे निर्णायक हैं। उनसे पूछा जाना चाहिए, उन्हें परिणाम दिखाए जाने चाहिए, और बताया जाना चाहिए जब परिवर्तन ने वह नहीं दिया जिसकी आशा थी। उनकी टिप्पणियाँ अपने-आप में प्रमाण हैं। जो लाभ संख्याएँ दिखाती हैं और उपयोगकर्ता महसूस नहीं करते, वह निकट से देखने योग्य है।
व्यवहार में: सेवा प्रबंधन का एक उदाहरण
एक क्षेत्रीय स्वास्थ्य बीमाकर्ता का IT समूह प्रदाताओं के लिए दावों का पोर्टल बनाता और चलाता है। नीचे की संख्याएँ दृष्टांत के लिए हैं।
समूह दावा जमा करने में स्वचालित पात्रता की जाँचें जोड़ने की योजना बनाता है। दावों के संचालन के प्रबंधक के साथ लिखी परिकल्पना है: "हम मानते हैं कि स्वचालित पात्रता की जाँचें प्रदाताओं के बिलिंग कर्मचारियों को पहली बार सही दावे जमा करने में मदद करेंगी, ताकि सुधार के लिए लौटाए दावे तीन महीनों में 18 प्रतिशत से 12 प्रतिशत तक गिरें। हमें लौटाए दावों की दर से पता चलेगा, 1 मार्च को समीक्षित।" आधार पिछले 12 सप्ताहों का औसत है, 18 प्रतिशत, साप्ताहिक सीमा 15 से 21 प्रतिशत के साथ। अग्रणी संकेतक पहले महीने में जाँच का उपयोग है। दावों के संचालन के प्रबंधक लाभ के स्वामी हैं।
टीम छोटे चरणों में रिलीज़ करती है, जाँच पहले एक क्षेत्र को उपलब्ध करके। तीन सप्ताह बाद उस क्षेत्र में जाँच का उपयोग 64 प्रतिशत है। समीक्षा की तिथि पर लौटाए दावे जाँच वाले क्षेत्र में 13 प्रतिशत तक और बिना जाँच वाले क्षेत्रों में 17 प्रतिशत तक गिरते हैं। दावों के प्रबंधक बताते हैं कि अवधि में एक बिलिंग कोड पर नीति का बदलाव भी लागू हुआ। टीम उसे भ्रमित करने वाला कारक सूचीबद्ध करती है और दोनों समूहों से उस कोड वाले दावे हटाती है, जिससे 14 प्रतिशत के विरुद्ध 17.5 रहता है। लाभ की प्राप्ति "आंशिक पूरा" दर्ज होती है: आधार से स्पष्ट अंतर से बेहतर, 12 प्रतिशत के लक्ष्य से कम। टीम रजिस्टर में ईमानदारी से लिखती है कि प्रमाण एक तिमाही में चरणबद्ध रोलआउट से है, और प्रभाव अन्य प्रदाताओं के लिए भिन्न हो सकता है।
फिर वे जाँच सभी क्षेत्रों में रोलआउट करते हैं, तीन महीनों में फिर जाँचने की योजना के साथ, और त्रुटि का संदेश सुधारने का काम जोड़ते हैं, क्योंकि प्रदाताओं की टिप्पणियाँ कहती हैं कि संदेश अस्पष्ट है। वित्त निदेशक बोर्ड के लिए एकल संख्या माँगते हैं। IT के प्रमुख सीमा और विधि प्रस्तुत करते हैं, और प्रमाण की अनुमति से अधिक सटीकता वाला आँकड़ा बताने से मना करते हैं। निर्णय अगली समीक्षा की तिथि के साथ दर्ज होता है।
एजाइल, AI, स्वचालन और विश्लेषण
एजाइल
काम शुरू होने से पहले अपेक्षित लाभ बताएँ और रिलीज़ के बाद उन लोगों के साथ उसकी जाँच करें जिन्हें लाभ होना था। सावधानी यह है कि बिना आधार के दावा किए लाभ कहानियाँ हैं।
AI
AI परियोजनाएँ अक्सर बड़े लाभ का वादा करती हैं, इसलिए AI-सहायता वाले काम का आधार, अपेक्षित बदलाव और प्रमाण अलग दर्ज करें, और उत्पादकता के दावों को गुणवत्ता और लागत से जोड़ें। सावधानी यह है कि AI औज़ार से बनाए लाभ के अनुमानों की जाँच होनी चाहिए, क्योंकि वे सटीक लग सकते हैं और असमर्थित हो सकते हैं।
स्वचालन
अपनी प्रणालियों में पहले से मौजूद परिणाम के संकेतकों का जुटाना स्वचालित करें, और लाभ की समीक्षा की प्रक्रिया को पूर्णता पर मापें। सावधानी यह है कि संकेतकों के स्वचालित डैशबोर्ड इस बातचीत की जगह ले सकते हैं कि लाभ हुआ या नहीं।
विश्लेषण
परिणाम के संकेतकों की गति प्रमाण की गुणवत्ता और आरोपण की सीमाओं के साथ रिपोर्ट करें। यह जिस निर्णय को सूचित करता है वह है क्या जारी रखना, बदलना या रोकना है। सावधानी यह है कि आरोपण कठिन है, इसलिए अनिश्चितता का वर्णन करें।
क्षेत्र का नज़रिया
स्टार्टअप। लाभ राजस्व और प्रतिधारण के निकट हैं, और सीखने की गति मायने रखती है। कार्डों पर एक-पंक्ति की परिकल्पनाएँ लिखें, उन्हें जल्दी जाँचें, और भारी रजिस्टरों से बचें। सरल तुलनाएँ उपयोग करें, और स्वीकार करें कि छोटे नमूने सीमित करते हैं कि आप क्या दावा कर सकते हैं।
छोटा व्यवसाय। स्वामी ही लाभ का स्वामी है, और प्रभाव दिखाई देते हैं। अपेक्षित प्रभावों वाले बदलावों की छोटी सूची रखें और हर तिमाही उसकी समीक्षा करें। छोटे लाभों को बड़े आँकड़ों में फुलाने से बचें, और परिवर्तन की लागत से तुलना करें।
उद्यम। पोर्टफ़ोलियो, वित्त के चक्र और कई हितधारक लाभ के रजिस्टर को उपयोगी बनाते हैं। उसे छोटे बदलावों के लिए हल्का और बड़े के लिए कठोर रखें, स्वामी व्यावसायिक इकाइयों में रखें, और पोर्टफ़ोलियो में समीक्षा करें। भिन्न परिभाषाओं के साथ संख्याओं के रोल-अप होने से सावधान रहें।
सरकार और सार्वजनिक क्षेत्र। परिणाम अक्सर सार्वजनिक वस्तुएँ होते हैं, जैसे पहुँच, निष्पक्षता और सुरक्षा, जो राजस्व तक घटते नहीं। परिणाम उन लोगों के साथ परिभाषित करें जिनकी सेवा होती है, मिश्रित प्रमाण उपयोग करें, और विधियाँ खुलकर रिपोर्ट करें। औपचारिक व्यावसायिक औचित्य और लाभ की समीक्षाएँ आवश्यक हो सकती हैं, और ईमानदार शून्य परिणाम सार्वजनिक जवाबदेही के लिए मायने रखते हैं (देखें विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
लागत मुख्यतः ध्यान है। परिकल्पना लिखने में मिनट लगते हैं, आधार में एक या कुछ घंटे, और समीक्षा में संक्षिप्त बैठक। प्रयोगों और चरणबद्ध रोलआउट को डिज़ाइन का प्रयास और कुछ औज़ार चाहिए। लाभ का रजिस्टर स्प्रेडशीट या काम के ट्रैकर का फ़ील्ड हो सकता है।
प्रतिफल बेहतर निवेश निर्णय है। जो टीम अपनी परिकल्पनाओं की जाँच करती है वह उन चीज़ों को बनाना बंद कर देती है जो मदद नहीं करतीं, जो करती हैं उन्हें बढ़ाती है, और सीखती है कि वह कितना अच्छा पूर्वानुमान करती है। यह अनुपयोगी फ़ीचर और विफल कार्यक्रमों की लागत बचाता है। मामला अपने डेटा से बनाएँ: परिवर्तनों का वह हिस्सा जिनमें परिकल्पना थी, वह हिस्सा जो जाँचा गया, और बाद में छोड़े या पलटे काम की लागत। IT परियोजनाओं की विफलता की दर के प्रकाशित आँकड़ों से बचें जब तक आप उनका स्रोत और विधि अनुरेखित न कर सकें, क्योंकि वे बहुत भिन्न होते हैं और अक्सर संदर्भ के बिना उद्धृत किए जाते हैं। वित्तीय उपचार अगले भाग में है (देखें विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य)।
प्रतिरूप-विरोधी और जाल
- डिलीवरी को मूल्य गिनना। शिप हुई फ़ीचर साधन है। लोगों पर असर जाँचें।
- ऐसी परिकल्पनाएँ जो विफल नहीं हो सकतीं। उन्हें विशिष्ट बनाएँ, संख्या और तिथि के साथ।
- अपनी कॉपी स्वयं जाँचना। टीम के बाहर के लाभ के स्वामी से परिणाम आँकवाएँ।
- पहले-और-बाद से कारण का दावा करना। भ्रमित करने वाले कारक सूचीबद्ध करें और जहाँ संभव हो तुलना उपयोग करें।
- केवल जीत रिपोर्ट करना। शून्य और नकारात्मक परिणाम दर्ज करें। केवल सफलताओं का रजिस्टर ईमानदार नहीं है।
- व्यक्तियों के लिए लाभ के लक्ष्य रखना। लोगों से बंधे लक्ष्य फुलाए दावों को न्योता देते हैं। लाभ को टीम और पहल के स्तर पर रखें।
- अति-सटीकता। एकल दशमलव संख्या नहीं, सीमा और विधि रिपोर्ट करें।
- उस काम को अनदेखा करना जिसका कोई नया लाभ नहीं। उसका नाम लें, और उसके लिए लाभ की कहानी न गढ़ें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वयन |
|---|---|---|---|---|---|
| मूल्य बताना | लाभ केवल व्यावसायिक औचित्य में दावा किए जाते हैं | कुछ बदलावों के लिए परिकल्पनाएँ लिखी गईं | हर महत्वपूर्ण परिवर्तन के लिए संक्षिप्त परिकल्पना, आधार और स्वामी | परिकल्पनाएँ और सीमाएँ अनुमोदन पर तय; अग्रणी और पश्चगामी संकेतक परिभाषित | टीमों और आपूर्तिकर्ताओं में साझा परिकल्पनाएँ; उपयोगकर्ताओं के साथ परिभाषित परिणाम |
| मूल्य की जाँच | रिलीज़ के बाद कोई जाँच नहीं | डिलीवरी टीम की कभी-कभार की जाँच | स्वतंत्र स्वामी के साथ निर्धारित समीक्षा | तुलनाएँ और भ्रमित करने वाले कारक दर्ज; प्रमाण की गुणवत्ता ट्रैक | पोर्टफ़ोलियो के स्तर का प्रमाण वित्त को दिशा देता है; टीमों में साझा प्रयोग |
| सीखना | जीत का जश्न, विफलताएँ भुला दी जाती हैं | कुछ सबक दर्ज | शून्य परिणाम दर्ज और समीक्षित | छूटी परिकल्पनाओं के पैटर्न चयन और आकार का अनुमान सुधारते हैं | सीखना संगठन भर और साझेदारों के साथ नियोजन को खिलाता है |
जाँच-सूची
- हर महत्वपूर्ण परिवर्तन की लिखित मूल्य की परिकल्पना है, आधार, संकेतक और समीक्षा की तिथि के साथ।
- हर लाभ का स्वामी डिलीवरी टीम के बाहर है।
- अग्रणी और पश्चगामी संकेतक परिभाषित और ट्रैक हैं।
- समीक्षाएँ स्वामी के साथ सहमत तिथि पर होती हैं।
- जहाँ संभव हो तुलनाएँ या चरणबद्ध रोलआउट उपयोग होते हैं।
- हर दावा किए परिणाम के लिए भ्रमित करने वाले कारक सूचीबद्ध हैं।
- शून्य और नकारात्मक परिणाम दर्ज और साझा होते हैं।
- प्रमाण की गुणवत्ता लाभ के दावों के बगल में ट्रैक होती है।
- किसी व्यक्ति का निजी लाभ का लक्ष्य नहीं है।
- त्रैमासिक पोर्टफ़ोलियो की समीक्षा पूरी और छूटी परिकल्पनाओं के पैटर्न देखती है।
AI प्रॉम्प्ट
मूल्य की परिकल्पना लिखें।
We plan to [describe change] for [users or stakeholders] in [type of
organization]. The problem today: [describe]. Draft a value hypothesis in the
form "We believe that [change] will help [who] to [do what] so that [measurable
improvement]. We will know by [indicator]..." Suggest one leading and one
lagging indicator, what baseline we need, and a review date logic. Do not invent
target values; leave them as placeholders for us. List your assumptions and what
we need to find out.
दावा किए परिणाम के लिए भ्रमित करने वाले कारक सूचीबद्ध करें।
We claim that [change] improved [indicator] from [before] to [after] between
[dates]. Other things that happened in the period: [list]. List plausible
confounding factors, how each could explain the result, and what data or
comparison would help rule it out. Suggest wording that states what the
evidence supports. Do not assume a cause the data cannot support. List your
assumptions.
चरणबद्ध रोलआउट की तुलना की रचना करें।
We can release [change] to [number] groups at different times: [describe
groups and constraints]. Propose a staged rollout that lets us compare groups
with and without the change, say what indicator and period to use, what could
bias the comparison, and what we would conclude from different outcomes. Do not
invent effect sizes. List your assumptions and risks.
लाभ के रजिस्टर की प्रविष्टि की समीक्षा करें।
Review this benefits register entry for [initiative]: [paste entry including
claim, baseline, method, owner, and review date]. Point out missing
information, vague wording, claims the evidence does not support, and ways the
result could be gamed. Suggest a stronger wording that fits what we actually
measured. List your assumptions and questions for the owner.
AI स्किल
- Service Management Metrics skill: मूल्य या परिणाम का माप रिपोर्ट करने से पहले उसकी जोड़ीदार सुरक्षा-रेखा खोजने के लिए उपयोग करें।
- Service Management Metrics maintainer skill: यह जाँचने के लिए उपयोग करें कि लाभ के माप की प्रविष्टि अपना गेमिंग का रास्ता, सुरक्षा-रेखा और प्रमाण का मानक रखती है।
मुख्य निष्कर्ष
- बनाने से पहले आधार, डिलीवरी टीम के बाहर के स्वामी और समीक्षा की तिथि के साथ जाँचने योग्य मूल्य की परिकल्पना लिखें।
- दिशा लेने के लिए अग्रणी और पुष्टि के लिए पश्चगामी संकेतक उपयोग करें।
- जहाँ हो सके तुलना करें, भ्रमित करने वाले कारक सूचीबद्ध करें, और केवल वही दावा करें जो प्रमाण सहारा देता है।
- शून्य और नकारात्मक परिणाम दर्ज करें; एकसमान सफलता का रजिस्टर ईमानदार नहीं है।
- दावे के आकार के बगल में प्रमाण की गुणवत्ता ट्रैक करें।
- परिणाम की पुष्टि होने तक हितधारकों और उपयोगकर्ताओं को सहयोग में रखें।
संदर्भ और आगे का अध्ययन
- Ward, J., and Daniel, E., Benefits Management: How to Increase the Business Value of Your IT Projects, 2nd ed., Wiley, 2012.
- Doerr, J., Measure What Matters, Portfolio/Penguin, 2018.
- Kohavi, R., Tang, D., and Xu, Y., Trustworthy Online Controlled Experiments, Cambridge University Press, 2020.
- Hubbard, D. W., How to Measure Anything: Finding the Value of Intangibles in Business, 3rd ed., Wiley, 2014.
- Beck, K., et al., Manifesto for Agile Software Development and Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, Benefits realisation management.
- Wikipedia, Theory of change.
- Wikipedia, Logic model.
- Wikipedia, Leading indicator.
- Wikipedia, Lagging indicator.
- Wikipedia, Objectives and key results.
- Wikipedia, Goodhart's law.
- Wikipedia, A/B testing.
- Wikipedia, Difference in differences.
- Wikipedia, Confounding.
- Wikipedia, Survivorship bias.