अवलोकन और प्रेरणा

चालू सेवा में हर परिवर्तन के चीज़ें बदतर करने की कुछ संभावना होती है। व्यावहारिक प्रश्न हैं कि ऐसा कितनी बार होता है, वह कितना अनियोजित काम पैदा करता है, और टीम कितनी जल्दी उबरती है। यह विषय उन मापों को कवर करता है जो इनका उत्तर देते हैं: विफल होने वाले परिवर्तनों का हिस्सा, आपातकालीन रास्ते की ज़रूरत वाले परिवर्तनों का हिस्सा, रोलबैक और हॉटफ़िक्स की दरें, और खराब परिवर्तन के बाद का पुनर्कार्य। यह विषय के सबसे कम आकर्षक भाग को भी कवर करता है, जो इस पर सहमत होना है कि विफलता गिनी क्या जाएगी।

पहले कुछ शब्द। ITIL 4 में परिवर्तन सक्षमीकरण नामक प्रैक्टिस किसी भी ऐसी चीज़ के जोड़, संशोधन या हटाव को कवर करती है जो सेवा को प्रभावित कर सके। इसलिए परिवर्तन कोड डिप्लॉयमेंट से व्यापक है: उसमें कॉन्फ़िगरेशन का संपादन, प्रमाणपत्र का नवीनीकरण, फ़ायरवॉल नियम, या डेटाबेस माइग्रेशन शामिल है। मानक परिवर्तन पूर्व-अधिकृत और कम जोखिम का होता है, सामान्य परिवर्तन आकलन से गुज़रता है, और आपातकालीन परिवर्तन तत्काल किया जाता है, आमतौर पर सेवा बहाल करने या गंभीर संवेदनशीलता बंद करने के लिए। डिप्लॉयमेंट सॉफ़्टवेयर के किसी संस्करण को परिवेश में रखने की क्रिया है, जबकि रिलीज़ उपयोगकर्ताओं के लिए क्षमता उपलब्ध करती है। जो टीमें फ़ीचर टॉगल (feature toggle) का उपयोग करती हैं वे कोड को बिना रिलीज़ किए डिप्लॉय कर सकती हैं (देखें विषय 4.5, रिलीज़ और डिप्लॉयमेंट मीट्रिक्स)।

परिवर्तन की विफलता (change failure) वह परिवर्तन है जो सेवा को घटाता है या उपचार माँगता है। उपचार कई रूप लेता है। रोलबैक (rollback) प्रणाली को उसकी पहले की स्थिति पर लौटाता है। हॉटफ़िक्स (hotfix) सामान्य रिलीज़ लय के बाहर लगाया गया तत्काल पैच है। रोल-फ़ॉरवर्ड सुधार टूटे परिवर्तन के ऊपर नया परिवर्तन भेजता है। पुनर्कार्य (rework) वह अनियोजित प्रयास है जो किसी ऐसी चीज़ को फिर करने या मरम्मत करने में लगता है जो पूरी मानी गई थी। निरंतर डिलीवरी (continuous delivery) के परिवेश में, जहाँ छोटे परिवर्तन अक्सर उत्पादन तक बहते हैं, ये माप इस बारे में मुख्य प्रमाण हैं कि गति स्थिरता की कीमत ले रही है या नहीं।

दोनों परंपराएँ एक ही घटना को अलग तरह से देखती हैं। ITIL दृष्टि परिवर्तन रिकॉर्ड के इर्द-गिर्द संगठित है: क्या परिवर्तन अधिकृत था, क्या वह सफल हुआ, और क्या परिणाम दर्ज हुआ? जो परिवर्तन कागज़ पर सफल होता है वह भी एक घंटे बाद घटना पैदा कर सकता है। एजाइल दृष्टि कार्य-मद और डिप्लॉयमेंट के इर्द-गिर्द संगठित है: क्या टीम की पूर्णता की परिभाषा टिकी, और क्या परिवर्तन ने जल्द ही अनियोजित काम पैदा किया? कोई दृष्टि अकेले पूरी नहीं। DORA कार्यक्रम के पीछे का शोध परिवर्तन की विफलता दर और डिप्लॉयमेंट के पुनर्कार्य की दर को थ्रूपुट के मापों के बगल में दो "अस्थिरता" माप मानता है (देखें विषय 2.8, DORA मीट्रिक्स, जो उन्हें कार्यक्रम के स्तर पर परिभाषित करता है)। यह विषय यांत्रिकी में अधिक गहरा जाता है: विफलता कैसे परिभाषित करें, घटनाओं को परिवर्तनों से कैसे जोड़ें, आपातकालीन काम कैसे गिना जाए, और संख्याओं को कैसे गेम किया जाता है।

शुरू से एक चेतावनी लागू होती है। ये माप टीम, सेवा या पाइपलाइन का वर्णन करते हैं। वे किसी व्यक्ति का वर्णन कभी नहीं करते। किसी व्यक्तिगत इंजीनियर से जुड़ी परिवर्तन विफलता दर लोगों को जोखिम भरे और मूल्यवान काम से बचना, गिनतियाँ अच्छी दिखने तक परिवर्तनों को बाँटना, और समस्याएँ रिपोर्ट करना बंद करना सिखाती है (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)। गुडहार्ट का नियम (Goodhart's law) यहाँ कठोरता से लागू होता है, क्योंकि "कम विफलताएँ" कम विफलताएँ दर्ज करके पाना आसान है।

घटना का समय विषय 3.3, घटना की प्रतिक्रिया और समाधान का समय का है, सबसे बुरी घटनाएँ विषय 3.4, बड़ी घटना के मीट्रिक्स की, अनुमोदन का प्रवाह और मानक परिवर्तन का हिस्सा विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स का, मूल कारण विषय 4.1, समस्या प्रबंधन मीट्रिक्स के, और लिखित समीक्षा विषय 4.2, पोस्टमॉर्टम और सीखने के मीट्रिक्स की।

मुख्य सिद्धांत

  • विफलता की एक लिखित परिभाषा चाहिए। जो टीमें मामला-दर-मामला तय करती हैं वे ऐसी संख्याएँ बनाती हैं जिनका रुझान या तुलना नहीं हो सकती, और परिभाषा पर बहस काम पर बहस की जगह ले लेती है।
  • विफलता को उसके परिवर्तन तक अनुरेखित किया जाना चाहिए। घटना, रोलबैक या हॉटफ़िक्स और उसे पैदा करने वाले परिवर्तन के बीच दर्ज कड़ी के बिना, विफलता दर अंदाज़ा है।
  • उपचार का हर रास्ता गिनें। रोलबैक, हॉटफ़िक्स, रोल-फ़ॉरवर्ड और हाथ का जुगाड़ एक ही घटना के चार रास्ते हैं। जो माप उनमें से एक गिनता है वह टीमों को दूसरा चुनने के लिए पुरस्कृत करता है।
  • विफलता को गति और बहाली के साथ पढ़ें। अकेली परिवर्तन विफलता दर कम बार बदलकर सुधारी जा सकती है, जो शायद ही लक्ष्य है। इसे लीड टाइम, डिप्लॉयमेंट की आवृत्ति और बहाली के समय से जोड़ें।
  • छोटे नमूनों को केवल प्रतिशत नहीं, गिनतियाँ चाहिए। महीने में आठ परिवर्तनों और एक विफलता वाली टीम की विफलता दर 12.5 प्रतिशत है जो लगभग कुछ नहीं कहती, इसलिए गिनतियाँ दिखाएँ और लंबी खिड़की इस्तेमाल करें (देखें विषय 1.6, सेवा मीट्रिक्स के लिए सांख्यिकीय साक्षरता)।
  • आपातकाल संकेत है, पाप नहीं। आपातकालीन परिवर्तनों का स्थिर, समझाया हिस्सा सामान्य है। बढ़ता हिस्सा आमतौर पर अपस्ट्रीम गुणवत्ता, योजना या पहचान की समस्याओं की ओर इशारा करता है।

मीट्रिक परिभाषाएँ

विफलता और पुनर्कार्य के माप परिवर्तन रिकॉर्ड, डिप्लॉयमेंट लॉग और घटना औज़ार को जोड़ने पर निर्भर हैं। नीचे की हर परिभाषा बताती है कि क्या गिना जाता है, क्या बाहर है, और घड़ी कहाँ शुरू और रुकती है। टीमों को परिभाषाएँ अपने मीट्रिक रजिस्टर में नकल करनी चाहिए और बताए कारण के साथ समायोजित करनी चाहिए।

मीट्रिक परिभाषा सूत्र इकाई डेटा स्रोत ITIL प्रैक्टिस एजाइल समकक्ष आवृत्ति
परिवर्तन की विफलता दर उत्पादन के परिवर्तनों का हिस्सा जो सेवा घटाते हैं या उपचार माँगते हैं विफलता की खिड़की के भीतर रोलबैक, हॉटफ़िक्स, रोल-फ़ॉरवर्ड सुधार या जुड़ी घटना माँगने वाले परिवर्तन / अवधि में पूरे हुए उत्पादन के सभी परिवर्तन; खिड़की परिवर्तन के पूरा होने पर शुरू होती है और दिनों की निश्चित संख्या (उदाहरण के लिए 7) के बाद रुकती है, मीट्रिक रजिस्टर में लिखी; जो परिवर्तन अब भी खिड़की के भीतर हैं वे अलग रिपोर्ट होते हैं और खिड़की बंद होने तक दर से बाहर प्रतिशत घटना औज़ार और हॉटफ़िक्स सूची से जुड़े परिवर्तन रिकॉर्ड या डिप्लॉयमेंट लॉग परिवर्तन सक्षमीकरण; घटना प्रबंधन पूर्णता की परिभाषा; निकल गए दोष मासिक, 90 दिन की चलती खिड़की पर
आपातकालीन परिवर्तन का हिस्सा आपातकालीन रास्ते से किए गए परिवर्तनों का हिस्सा आपातकालीन दर्ज परिवर्तन / अवधि में पूरे हुए सभी परिवर्तन; आपातकालीन का अर्थ है कि सामान्य आकलन तात्कालिकता के कारण छोड़ा या छोटा किया गया, और पूर्व-अधिकृत मानक परिवर्तन दोनों गिनतियों से बाहर प्रतिशत परिवर्तन रिकॉर्ड का प्रकार फ़ील्ड परिवर्तन सक्षमीकरण अनियोजित काम और तेज़ी की सेवा-श्रेणी मासिक
रोलबैक दर उन परिवर्तनों का हिस्सा जो पिछले संस्करण पर लौटाए गए उत्पादन तक पहुँचने के बाद पलटे परिवर्तन / अवधि में उत्पादन के सभी परिवर्तन; किसी उपयोगकर्ता तक पहुँचने से पहले किया रोलबैक (उदाहरण के लिए अपने पहले चरण पर रोका कैनरी) अलग गिना जाता है प्रतिशत डिप्लॉयमेंट लॉग और रिलीज़ औज़ार रिलीज़ प्रबंधन; डिप्लॉयमेंट प्रबंधन पाइपलाइन और रिलीज़ की प्रैक्टिसें मासिक
हॉटफ़िक्स दर उन परिवर्तनों का हिस्सा जो सामान्य रिलीज़ प्रवाह के बाहर लगाए तत्काल पैच हैं हॉटफ़िक्स के रूप में टैग या ब्रांच किए परिवर्तन / अवधि में उत्पादन के सभी परिवर्तन; हर में स्वयं हॉटफ़िक्स भी शामिल हैं प्रतिशत संस्करण नियंत्रण की ब्रांच या टैग और डिप्लॉयमेंट लॉग परिवर्तन सक्षमीकरण; घटना प्रबंधन अनियोजित काम; तेज़ी मासिक
डिप्लॉयमेंट के पुनर्कार्य की दर डिप्लॉयमेंटों का हिस्सा जो पहले के डिप्लॉयमेंट की समस्या के अनियोजित सुधार थे उसी विफलता की खिड़की के भीतर हाल के पहले के डिप्लॉयमेंट के दोष या विफलता को ठीक करने वाले उत्पादन के डिप्लॉयमेंट / अवधि के सभी उत्पादन डिप्लॉयमेंट; रोडमैप से नियोजित अनुवर्ती कार्य शामिल नहीं प्रतिशत "सुधारता है" कड़ी या टैग वाला डिप्लॉयमेंट लॉग, और कार्य ट्रैकर परिवर्तन सक्षमीकरण; सतत सुधार पुनर्कार्य; निकल गए दोष; विफलता की माँग मासिक
परिवर्तन-से-घटना कड़ी की दर हल हुई घटनाओं का हिस्सा जो दर्ज करती हैं कि कोई परिवर्तन उनका कारण था या नहीं, और कौन-सा "परिवर्तन से हुई" फ़ील्ड पूरी वाली घटनाएँ (हाँ या नहीं, और हाँ होने पर परिवर्तन का पहचानकर्ता) / अवधि में हल हुई घटनाएँ; घड़ी तब रुकती है जब घटना बंद होती है प्रतिशत घटना औज़ार और परिवर्तन रिकॉर्ड घटना प्रबंधन; परिवर्तन सक्षमीकरण घटना-पश्चात समीक्षा; पूर्णता की परिभाषा मासिक
विफलता की परिभाषा पर सहमति परिवर्तनों के नमूने के विफल होने या न होने पर दो समीक्षकों के बीच सहमति नमूने के वे परिवर्तन जहाँ दो स्वतंत्र समीक्षक लिखित परिभाषा से एक ही विफलता का निर्णय देते हैं / नमूने के परिवर्तन; हर तिमाही यादृच्छिक रूप से चुने कम से कम 20 परिवर्तनों का नमूना प्रतिशत मीट्रिक रजिस्टर के साथ रखी नमूना समीक्षा शीट सतत सुधार; मापन और रिपोर्टिंग रेट्रोस्पेक्टिव त्रैमासिक

तालिका पर दो टिप्पणियाँ। विफलता दर और पुनर्कार्य दर एक-दूसरे को ढकती हैं पर भिन्न हैं: बिना नए डिप्लॉयमेंट के लौटाई गई विफलता विफलता दर में गिनी जाती है, पुनर्कार्य दर में नहीं। और इकाई परिवर्तन या डिप्लॉयमेंट है, घटना नहीं, क्योंकि एक परिवर्तन तीन घटनाएँ पैदा कर सकता है और एक घटना तीन परिवर्तनों से आ सकती है।

सिफ़ारिशें

कोई भी डेटा जुटाने से पहले विफलता की परिभाषा लिखें

सहमत हों कि "विफल" का क्या अर्थ है और उसे मीट्रिक रजिस्टर में रखें। काम करने योग्य परिभाषा है कि परिवर्तन विफल हुआ यदि पूरा होने के बाद बताई खिड़की के भीतर उसे रोलबैक किया गया, उसे हॉटफ़िक्स या रोल-फ़ॉरवर्ड सुधार चाहिए था, या वह बताई गंभीरता या उससे ऊपर की घटना से जुड़ा था। खिड़की बताएँ (7 दिन आम है, और सही मान इस पर निर्भर है कि आपकी सेवाओं में समस्याएँ कितनी जल्दी दिखती हैं), घटना की गंभीरता की सीमा, और विवादित मामले में कौन निर्णय करता है। कम से कम पाँच काम किए उदाहरण लिखें, अटपटे भी, जैसे वह परिवर्तन जिसने बिना किसी आउटेज के प्रदर्शन घटाया। परिभाषा की वार्षिक समीक्षा करें और बदलाव कारण सहित लॉग करें, ताकि नियम खिसकने पर रुझान रेखा को दोबारा बताया जा सके।

घटना के रिकॉर्ड में विफलताओं को परिवर्तनों से जोड़ें

घटना रिकॉर्ड में अनिवार्य फ़ील्ड जोड़ें: परिवर्तन से हुई, हाँ या नहीं, और हाँ होने पर परिवर्तन का पहचानकर्ता। फ़ील्ड समाधान के दौरान भरा जाए और घटना-पश्चात समीक्षा में जाँचा जाए (देखें विषय 4.2, पोस्टमॉर्टम और सीखने के मीट्रिक्स)। कड़ी की दर को अपनी मीट्रिक के रूप में ट्रैक करें। यदि केवल आधी घटनाओं में फ़ील्ड है, तो विफलता दर सच को अज्ञात मात्रा से कम बताती है, और संख्या के बगल में यह कहें। जहाँ संभव हो पहला अंदाज़ा स्वचालित करें, उदाहरण के लिए घटना शुरू होने से पहले के घंटों में प्रभावित सेवा पर पूरे हुए परिवर्तन सूचीबद्ध करके, और पुष्टि व्यक्ति से कराएँ।

केवल एक नहीं, उपचार के सभी रास्ते गिनें

कई संकेतों से एक विफलता परिभाषित करें। रोलबैक डिप्लॉयमेंट औज़ार से, हॉटफ़िक्स संस्करण नियंत्रण या रिलीज़ लॉग से, रोल-फ़ॉरवर्ड सुधार "सुधारता है" कड़ी से, और घटनाएँ घटना औज़ार से खींचें, फिर परिवर्तन के अनुसार प्रतिलिपियाँ हटाएँ। जो टीम केवल रोलबैक गिनती है वह उस दिन विफलताएँ गायब देखेगी जिस दिन वह आगे ठीक करना शुरू करती है। हर रास्ते को अलग विभाजन के रूप में भी रखें, क्योंकि मिश्रण कहानी बताता है: कई हॉटफ़िक्स और कम रोलबैक सुझाते हैं कि रोलबैक कठिन है, जिसे अपने-आप में ठीक करना योग्य है।

आपातकालीन परिवर्तन के हिस्से को अंक नहीं, प्रश्न मानें

आपातकालीन परिवर्तनों की समीक्षा समूह के रूप में करें, लक्ष्य के रूप में नहीं। हर तिमाही उन सबको पढ़ें और कारण छाँटें: सेवा बहाल करना, संवेदनशीलता बंद करना, देर का व्यावसायिक अनुरोध, छूटा योजना का चरण, या अनुमोदन का रास्ता जो सामान्य काम के लिए बहुत धीमा था। अंतिम दो प्रणाली की समस्याएँ हैं जिन्हें मानक रास्ता सुधारकर ठीक किया जाना चाहिए ताकि लोगों को उसे बायपास न करना पड़े (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)। शून्य का हिस्सा संदिग्ध है, क्योंकि सच्चे आपातकाल होते हैं। जो हिस्सा लगातार बढ़ता है वह समस्या रिकॉर्ड का हकदार है (देखें विषय 4.1, समस्या प्रबंधन मीट्रिक्स)।

पुनर्कार्य को विफलता की माँग के रूप में मापें

पुनर्कार्य को पहले की विफलता से बने काम के रूप में ट्रैक करें। विफलता की माँग का विचार सेवा रचना से आता है: वह माँग जो इसलिए है कि कुछ पहली बार में सही नहीं हुआ। डिलीवरी की भाषा में, उन डिप्लॉयमेंटों और कार्य-मदों को गिनें जिनका एकमात्र उद्देश्य हाल का परिवर्तन ठीक करना है। यह नियोजित और अनियोजित के विभाजन से सीधे जुड़ता है (देखें विषय 2.9, संचालन-कार्य और अनियोजित कार्य)। पुनर्कार्य पर खर्च हुई क्षमता के हिस्से को उत्पाद स्वामी के साथ बातचीत शुरू करने के लिए उपयोग करें, क्योंकि यह अमूर्त दर को इस समझौते में बदल देता है कि आगे किस पर काम करें।

दरें गिनतियों, वितरणों और खिड़की के साथ रिपोर्ट करें

प्रतिशत के बगल में गिनतियाँ दिखाएँ, और चलती खिड़की का उपयोग करें। दस बार डिप्लॉय करने वाली टीम की मासिक विफलता दर शोर वाली है। चलती 90 दिन की खिड़की उपयोग करें, दर के पीछे परिवर्तनों और विफलताओं की संख्या दिखाएँ, और अनिश्चितता का मोटा संकेत दें (देखें विषय 1.6, सेवा मीट्रिक्स के लिए सांख्यिकीय साक्षरता)। बहाली के लिए, माध्य की जगह विफलता से बहाली तक के समय का माध्य और 85वाँ परसेंटाइल दिखाएँ। जब सेवा में बहुत कम परिवर्तन हों, तो दर की जगह असली विफलताओं की सूची से कहानी बताएँ।

विफलता को गति से जोड़ें ताकि सुधार दोनों में से किसी में छिप न सके

परिवर्तन विफलता दर हमेशा लीड टाइम और डिप्लॉयमेंट की आवृत्ति के बगल में दिखाएँ। यदि विफलता दर गिरे जबकि डिप्लॉयमेंट की आवृत्ति भी तेज़ी से गिरे और लीड टाइम बढ़े, तो टीम परिवर्तनों को बैच कर रही हो सकती है, जो हर एक का जोखिम बढ़ाता है। यदि गति बढ़े और विफलता दर स्थिर रहे, तो प्रणाली परिवर्तन में बेहतर हो रही है। जोड़ी गेमिंग के और इस आरामदेह विश्वास के विरुद्ध मुख्य बचाव है कि कम डिप्लॉयमेंट का अर्थ सुरक्षित डिप्लॉयमेंट है (देखें विषय 2.8, DORA मीट्रिक्स)।

परिवर्तन को स्वयं सुधारने के लिए संख्याओं का उपयोग करें

विफलता के डेटा को इंजीनियरिंग प्रयोगों में बदलें। विफल परिवर्तनों की साझा विशेषताएँ देखें: आकार, दिन का समय, प्रकार, शामिल लोगों की संख्या, क्या उन्होंने साझा घटकों को छुआ, और क्या परीक्षण कवरेज पतला था। फिर एक छोटा, उलटने योग्य प्रयोग आज़माएँ जैसे छोटे बैच, जोखिम भरे क्षेत्र के लिए स्वचालित प्रतिगमन परीक्षण (regression testing), अगले जोखिम भरे परिवर्तन के लिए कैनरी रिलीज़ (canary release), या फ़ीचर टॉगल जो डिप्लॉयमेंट को रिलीज़ से अलग करता है। पूरी खिड़की के बाद दोबारा मापें। उद्देश्य बेहतर परिवर्तन है, और सुधरी मीट्रिक केवल प्रमाण है।

दोष-रहित मंच में मापों की साथ समीक्षा करें

जिन लोगों ने विफल परिवर्तन किए उनके साथ उनकी मासिक समीक्षा रखें। एजेंडे में तीन मदें हैं: गिनतियाँ और रुझान, अध्ययन के लिए चुने दो-तीन विफल परिवर्तन, और स्वामी सहित एक सुधार कार्रवाई। दोष-रहित समीक्षा का अभ्यास उपयोग करें, ताकि लोग बताएँ कि उस समय वे क्या जानते थे। समीक्षा के नोट मीट्रिक्स के साथ प्रकाशित करें। यदि लोग इस बात से कि संख्याओं का उपयोग कैसे होता है विफलताएँ रिपोर्ट करने में हिचकिचाते हैं, तो कुछ और बदलने से पहले उसे ठीक करें (देखें विषय 11.3, भय पैदा किए बिना मीट्रिक्स लागू करना)।

गेमिंग के रास्ते और सुरक्षा-रेखाएँ

मीट्रिक इसमें गेमिंग कैसे होती है जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा
परिवर्तन की विफलता दर विफलता की खिड़की संकरी करना; घटनाओं को परिवर्तनों से न जोड़ना; ख़राब परिवर्तन को "सेवा अनुरोध" या "रखरखाव" के रूप में वर्गीकृत करना; आगे ठीक करके उसे नया परिवर्तन कहना; कई संपादनों को एक परिवर्तन में बाँधना ताकि एक विफलता सब ढके परिवर्तन-से-घटना कड़ी की दर; घटना सूची के विरुद्ध त्रैमासिक नमूना ऑडिट; विफलता की परिभाषा पर सहमति; उसके बगल में लीड टाइम और डिप्लॉयमेंट की आवृत्ति
आपातकालीन परिवर्तन का हिस्सा झूठी जोखिम रेटिंग के साथ तत्काल काम को मानक रास्ते से भेजना; अनुमोदन से बचने के लिए सामान्य काम को आपातकालीन भेजना; आपातकाल को कई सामान्य परिवर्तनों में बाँटना सभी आपातकालीन परिवर्तनों का त्रैमासिक पाठ; कारण छाँटे और समीक्षित; मानक परिवर्तन का हिस्सा और अनुमोदन का लीड टाइम (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)
रोलबैक दर रोलबैक दर्ज करने से बचने के लिए आगे ठीक करना; टूटे संस्करण को चालू रखना; परिवर्तनों को उत्पादन से रोककर रखना ताकि पलटने को कुछ न हो उसके बगल में हॉटफ़िक्स दर और पुनर्कार्य दर; बहाली के समय का वितरण; डिप्लॉयमेंट लॉग के विरुद्ध घटनाओं का नमूना
हॉटफ़िक्स दर हॉटफ़िक्स टैग न करना; उन्हें सामान्य ब्रांच से भेजना; हॉटफ़िक्स को "छोटा सुधार" कहना डिप्लॉयमेंट के पुनर्कार्य की दर; ब्रांच और टैग का ऑडिट; अनियोजित काम का हिस्सा (देखें विषय 2.9, संचालन-कार्य और अनियोजित कार्य)
डिप्लॉयमेंट के पुनर्कार्य की दर सुधारों को मूल डिप्लॉयमेंट से न जोड़ना; सुधार को "नियोजित" लेबल करना; सुधार को नई फ़ीचरों के साथ बाँधना सुधारात्मक डिप्लॉयमेंट पर अनिवार्य "सुधारता है" कड़ी; नियोजित लेबल वाले डिप्लॉयमेंटों की नमूना समीक्षा; उसके बगल में परिवर्तन विफलता दर
परिवर्तन-से-घटना कड़ी की दर जाँचे बिना फ़ील्ड "नहीं" से भरना; फ़ील्ड को डिफ़ॉल्ट रूप से "नहीं" रहने देना; प्रतिशत बढ़ाने के लिए घटनाओं को थोक में बंद करना घटना-पश्चात समीक्षा में "नहीं" उत्तरों का नमूना जाँच; कोई डिफ़ॉल्ट मान नहीं; नमूने पर समीक्षकों की टिप्पणियाँ
विफलता की परिभाषा पर सहमति नमूने के लिए आसान उदाहरण चुनना; ऐसे समीक्षक जो स्वयं मापे जा रहे लोग हैं; परिभाषा ढीली करना ताकि सब सहमत हों टीम के बाहर के किसी से यादृच्छिक नमूना; जान-बूझकर सीमा के मामले शामिल करें; असहमतियाँ प्रकाशित करें और परिभाषा ठीक करें

स्वस्थ पठन ऐसा दिखता है: विफलता दर उस सीमा में है जिसे टीम समझती और समझाती है, कड़ी की दर इतनी ऊँची है कि विफलता दर पर भरोसा हो सके, आपातकालीन परिवर्तन थोड़े और समझाए हुए हैं, और रोलबैक तथा हॉटफ़िक्स छोटे और अभ्यास किए हुए हैं। विफलताएँ जल्दी रिपोर्ट होती हैं और बिना दोष के चर्चित। कम कड़ी की दर, घटती डिप्लॉयमेंट आवृत्ति और बढ़ते बैच के आकार के साथ अस्वाभाविक रूप से कम विफलता दर चेतावनी है, सफलता नहीं। किसी भी अचानक सुधार को पहले इंस्ट्रूमेंट जाँचने का संकेत मानें (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)।

समझौते: लाभ और हानि

तरीका ताकत कमज़ोरी
विफलता की कठोर, स्वचालित परिभाषा एकसमान, दोहराना सस्ता, रुझान देखना आसान सूक्ष्म ह्रास चूक जाती है; सौम्य रोलबैक को विफलता गिन सकती है
हर परिवर्तन की विवेक-आधारित समीक्षा संदर्भ और गंभीरता पकड़ती है धीमी, व्यक्तिपरक, दबाव और भटकाव के लिए खुली
लंबी विफलता की खिड़की (सप्ताह) देर से हुई विफलताएँ पकड़ती है कारण और प्रभाव को धुँधला करती है; हाल के परिवर्तन अभी रिपोर्ट नहीं हो सकते
उपचार के सभी रास्ते गिनना रास्ता बदलकर गेम करना कठिन कई डेटा स्रोतों को सावधानी से जोड़ना पड़ता है

स्वचालित परिभाषा को आधार बनाएँ, नमूने की मानवीय समीक्षा जोड़ें, और कुछ और बनाने से पहले परिवर्तनों और घटनाओं के बीच का जोड़ सुधारें।

अपनी टीम के साथ चर्चा के प्रश्न

1. यहाँ विफल परिवर्तन किसे गिना जाता है, और क्या हममें से दो लोग एक ही परिवर्तन पर असहमत हो सकते हैं? पाँच हाल के परिवर्तन लें और हर व्यक्ति से मत देने को कहें कि वे विफल हुए या नहीं। मतों और कारणों की तुलना करें। असहमतियाँ दिखाती हैं कि लिखित परिभाषा कहाँ पतली है। अटपटे मामलों, जैसे आउटेज के बिना प्रदर्शन में गिरावट, के लिए नियम पर सहमत हों और उसे उदाहरण के साथ लिखें।

2. हमें कैसे पता कि कौन-सी घटनाएँ परिवर्तन से हुईं? पूछें कि कड़ी आज कैसे दर्ज होती है और कौन भरता है। दस हाल की घटनाओं की समीक्षा करें और देखें कि कितनी में परिवर्तन जुड़ा है, और कितनी में होना चाहिए। चर्चा करें कि क्या फ़ील्ड वैकल्पिक है, क्या वह डिफ़ॉल्ट रूप से "नहीं" है, और उसे कौन जाँचता है। सूत्रधार रिकॉर्ड में ठोस सुधार का लक्ष्य रखे, जैसे बिना डिफ़ॉल्ट वाला अनिवार्य फ़ील्ड।

3. हम उपचार के कौन-से रास्ते उपयोग करते हैं, और क्या सब गिने जाते हैं? रोलबैक, हॉटफ़िक्स, रोल-फ़ॉरवर्ड सुधार, हाथ का जुगाड़, और फ़ीचर टॉगल बंद करना सूचीबद्ध करें। हर एक के लिए पूछें कि घटना कहाँ दर्ज होती है और क्या वह विफलता दर को खिलाती है। वे रास्ते नोट करें जो कोई निशान नहीं छोड़ते। चर्चा अक्सर दिखाती है कि टीम का पसंदीदा रास्ता वही है जिसे मीट्रिक नहीं देख सकती।

4. हमारा आखिरी आपातकालीन परिवर्तन कब था, और क्या उससे बचा जा सकता था? आखिरी तीन-चार पर चलें। पूछें कि हर एक को तत्काल क्या बनाता था, पहले क्या ज्ञात था, और बेहतर मानक रास्ता कैसा दिखता। असली आपातकाल को देर से हुई खोज और धीमे अनुमोदन से अलग करें। सामान्य रास्ते में एक सुधार पर सहमत हों जो आपातकाल के बार-बार के कारण को हटाए।

5. हमारे सप्ताह का कितना हिस्सा हाल के परिवर्तनों को ठीक करने में जाता है? याददाश्त से नहीं, ट्रैकर से पिछले चार सप्ताहों में पुनर्कार्य पर लगी क्षमता के हिस्से का अनुमान लगाएँ। अनुमान की तुलना ट्रैकर से करें। बात करें कि यह संख्या नियोजित काम में क्या कीमत लेती है और उत्पाद स्वामी इसका उपयोग कैसे करेगा। एक विफलता का पैटर्न और उसे घटाने के लिए एक प्रयोग चुनें।

6. यदि अगली तिमाही हमारी विफलता दर आधी हो जाए, तो क्या हम उस पर विश्वास करेंगे? शीर्षक की कल्पना करें और पूछें कि और क्या सच होना चाहिए: कड़ी की दर स्थिर, डिप्लॉयमेंट की आवृत्ति स्थिर, बहाली तेज़, और "रखरखाव" की कोई नई श्रेणी नहीं। चर्चा करें कि इनमें से कौन-सी जाँचें टीम पहले से करती है और कौन-सी गायब हैं। सहमत हों कि अचानक सुधार का जश्न मनाने से पहले उसकी जाँच कैसे होगी।

चार दृष्टिकोण

उत्पाद और डिलीवरी टीमें

डिलीवरी टीमें परिवर्तनों की स्वामी हैं, इसलिए वे विफलता की परिभाषा और सुधारों की स्वामी हैं। काम से शुरू करें: समीक्षा में विफल परिवर्तन देखें, साझा विशेषताएँ खोजें, और छोटे बैच, बेहतर परीक्षण या टॉगल आज़माएँ। पुनर्कार्य को बोर्ड के हिस्से के रूप में ट्रैक करें, ताकि अनियोजित सुधार नियोजित काम के बगल में दिखाई दें। संख्याएँ टीम के अपने सीखने के लिए रखें, और व्यक्ति-स्तर का डेटा साझा करने का विरोध करें। यदि कोई मीट्रिक नेताओं को दिखाई जाती है, तो टीम उसके हर बदलाव को समझाने में सक्षम होनी चाहिए।

सेवा और संचालन टीमें

संचालन टीमें परिवर्तन के परिणाम घटना की कतार में देखती हैं और घटनाओं और परिवर्तनों के बीच की कड़ी रखने के लिए सबसे अच्छी स्थिति में हैं। वे अनिवार्य फ़ील्ड जोड़ सकती हैं, उसे समाधान के चरण में जाँच सकती हैं, और परिणाम बिना दोष के डिलीवरी टीम को लौटा सकती हैं। संचालन आपातकालीन रास्ते का भी स्वामी है और उसके उपयोग की समीक्षा करे। बहाली के रास्तों की जानकारी साझा करें और डिलीवरी टीमों के साथ रोलबैक का अभ्यास करें, क्योंकि विफलता की लागत घटाने का सबसे अच्छा तरीका परिवर्तन को उलटने योग्य बनाने की साझा आदत है (देखें विषय 3.3, घटना की प्रतिक्रिया और समाधान का समय)।

नेतृत्व और शासन

नेताओं को सेवा के अनुसार रुझान, गति के साथ अस्थिरता के दोनों माप, और उनके पीछे के सुधार प्रयोग माँगने चाहिए। "विफलता दर 5 प्रतिशत से नीचे" जैसे निश्चित लक्ष्यों से बचें, जो पुनः-परिभाषा को न्योता देते हैं, और व्यक्तिगत समीक्षाओं में इन आँकड़ों का उपयोग करने से बचें। शासन निकाय डेटा का उपयोग इस प्रमाण के रूप में कर सकते हैं कि हल्का अनुमोदन रास्ता सुरक्षित है, यह जाँचकर कि नियंत्रण ढीले होने पर विफलता और बहाली स्थिर रहीं। आपातकालीन परिवर्तनों में बढ़ता रुझान योजना और अनुमोदन की रचना देखने का संकेत है, ऑन-कॉल इंजीनियरों को दोष देने का नहीं।

ग्राहक और उपयोगकर्ता

ग्राहकों को विफलता दर की परवाह नहीं। वे परवाह करते हैं कि क्या अद्यतन के बाद सेवा टूटती है और कितनी जल्दी लौटती है। विफलता का डेटा ईमानदार संवाद को सहारा देता है: जोखिम भरे परिवर्तनों की पूर्व सूचना, परिवर्तन के परेशानी पैदा करने पर स्पष्ट स्टेटस संदेश, और सीखने की दिखाई देती प्रतिबद्धता। जहाँ उपयोगकर्ता महत्वपूर्ण कार्यों के लिए सेवा पर निर्भर हैं, वहाँ रखरखाव की खिड़कियों और रोलबैक की अपेक्षाओं पर उनसे पहले से सहमत हों (देखें विषय 3.4, बड़ी घटना के मीट्रिक्स)।

व्यवहार में: सेवा प्रबंधन का एक उदाहरण

एक क्षेत्रीय स्वास्थ्य सेवा प्रदाता का IT विभाग मरीज़ शेड्यूलिंग सेवा चलाता है। सात लोगों की उत्पाद टीम सप्ताह में कई बार परिवर्तन जारी करती है, और पाँच लोगों की संचालन टीम घटनाएँ और परिवर्तन प्रक्रिया संभालती है। इस उदाहरण की सभी संख्याएँ दृष्टांत के लिए हैं।

एक तिमाही में मासिक रिपोर्ट परिवर्तन विफलता दर 4 प्रतिशत दिखाती है, जो पिछली तिमाही के 11 प्रतिशत से कम है। मुख्य सूचना अधिकारी प्रसन्न हैं। प्लैटफ़ॉर्म लीड को यक़ीन नहीं, क्योंकि ऑन-कॉल टीम कहती है कि उनकी रातें बेहतर नहीं हुईं। वे टीम से मीट्रिक रजिस्टर का नमूना ऑडिट चलाने को कहती हैं।

ऑडिट यादृच्छिक रूप से 30 परिवर्तन लेता है और दो समीक्षक लिखित परिभाषा लागू करते हैं। वे 30 में से 24 निर्णयों पर सहमत हैं, इसलिए विफलता की परिभाषा पर सहमति 80 प्रतिशत है (दृष्टांत)। फिर वे नमूने की तुलना घटना सूची से करते हैं। तिमाही में हल हुई 22 घटनाओं में से केवल 9 में "परिवर्तन से हुई" फ़ील्ड है, यानी कड़ी की दर 41 प्रतिशत। बाकी 13 को हाथ से पढ़कर समीक्षक पाते हैं कि 5 किसी परिवर्तन के एक दिन के भीतर शुरू हुईं। सुधरी गिनती विफलता दर को लगभग 9 प्रतिशत तक ले जाती है, और ऑडिट पाता है कि संख्या अच्छी क्यों दिखती थी: सुधारों को "रखरखाव" के लेबल के तहत डिप्लॉय करने की नई आदत, जिसे रिपोर्ट ने अंश और हर दोनों से बाहर रखा था।

गेमिंग का जोखिम लेबल है, और किसी ने उसकी योजना नहीं बनाई। टीम को बताया गया था कि विफलताएँ चिंता का विषय हैं, और "रखरखाव" ने बातचीत से बचा लिया। टीम तीन निर्णय लेती है। "परिवर्तन से हुई" फ़ील्ड बिना डिफ़ॉल्ट के अनिवार्य बनता है, और घटना-पश्चात समीक्षा उसे जाँचती है। "रखरखाव" लेबल सेवानिवृत्त होता है, और सुधारात्मक डिप्लॉयमेंट को उस परिवर्तन की कड़ी रखनी होगी जिसे वे ठीक करते हैं, जो पुनर्कार्य दर को खिलाती है। विफलता की परिभाषा छह काम किए उदाहरणों के साथ फिर लिखी जाती है, जिनमें धीमी-क्वेरी का प्रतिगमन भी शामिल है जिसने कभी आउटेज पैदा नहीं किया।

अगली तिमाही संशोधित विफलता दर 8 प्रतिशत और कड़ी की दर 90 प्रतिशत दिखाती है (दृष्टांत)। नेतृत्व की रिपोर्ट अब लीड टाइम के बगल में गिनतियाँ, कड़ी की दर और पुनर्कार्य दर दिखाती है, और मुख्य सूचना अधिकारी एकल प्रतिशत उद्धृत करना बंद करते हैं।

एजाइल, AI, स्वचालन और विश्लेषण

एजाइल

बार-बार के छोटे परिवर्तन विफलताओं को सस्ता और अनुरेखित करना आसान बनाते हैं, और टीम हितधारकों के साथ उनकी नियमित समीक्षा करती है। सावधानी यह है कि यदि विफलताओं को दंडित किया जाए, तो लोग उन्हें घोषित करना बंद कर देते हैं।

AI

AI-सहायता वाले परिवर्तन तेज़ दिखते हुए मात्रा और पुनर्कार्य बढ़ा सकते हैं। AI-सहायता वाले काम के लिए विफल परिवर्तन और पुनर्कार्य अन्य काम जैसी ही परिभाषा से रिपोर्ट करें, और डेटा में उन्हें चिह्नित करें। सावधानी यह है कि AI-सहायता वाले और अन्य काम की तुलना सावधानी माँगती है क्योंकि परिवर्तन प्रकार में भिन्न हो सकते हैं।

स्वचालन

परिवर्तनों, डिप्लॉयमेंट और घटनाओं को पहचानकर्ताओं से अपने-आप जोड़ें, और कड़ी की दर मापें। स्वचालित रोलबैक को सफलता और दुष्प्रभावों पर मापा जाना चाहिए। सावधानी यह है कि टूटी कड़ियाँ विफलता दर को जितनी है उससे बेहतर दिखाती हैं।

विश्लेषण

विफलता की परिभाषा एक बार बताएँ और कड़ियों का हाथ से नमूना लें। यह जिस निर्णय को सूचित करता है वह है कि परिवर्तन के अभ्यास को कहाँ मज़बूत करना है। सावधानी यह है कि परिवर्तनों की छोटी संख्या पर दरें बहुत झूलती हैं, इसलिए गिनतियाँ दिखाएँ।

क्षेत्र का नज़रिया

स्टार्टअप। परिवर्तन छोटे और बार-बार के हैं, और टीम अक्सर हर विफलता ज़बानी जानती है। परिभाषा एक अनुच्छेद तक रखें, डिप्लॉयमेंट औज़ार में रोलबैक और हॉटफ़िक्स टैग करें, और साप्ताहिक रेट्रोस्पेक्टिव में विफलताओं की समीक्षा करें। 20 परिवर्तनों पर विफलता दर शोर वाली है, इसलिए विफलताओं की सूची को मुख्य प्रमाण बनाएँ। जोखिम अनौपचारिकता है: लिखित परिभाषा के बिना दर इस पर बदलती है कि कौन गिन रहा है।

छोटा व्यवसाय। वही लोग डिप्लॉय, संचालन और सहायता करते हैं, इसलिए पुनर्कार्य सीधे नियोजित काम से प्रतिस्पर्धा करता है। विफलताएँ उस औज़ार में दर्ज करें जो आप पहले से इस्तेमाल करते हैं, घटना रिकॉर्ड में अनिवार्य फ़ील्ड जोड़ें, और हर तिमाही आपातकालीन परिवर्तनों की समीक्षा करें। केवल संख्याएँ सुधारने के लिए भारी अनुमोदन से बचें। साझा रोलबैक चेकलिस्ट परिवर्तन बोर्ड से अधिक मूल्यवान है।

उद्यम। कई टीमें, आपूर्तिकर्ता और औज़ार का अर्थ है कई परिभाषाएँ। टीमों के पार विफलता की परिभाषा और कड़ी का फ़ील्ड मानकीकृत करें, उसे मीट्रिक्स के कैटलॉग में प्रकाशित करें, और रोल-अप से पहले प्रति सेवा दरें निकालें। भटकाव खोजने के लिए नमूना ऑडिट इस्तेमाल करें, और हर आपूर्तिकर्ता के परिवर्तन रिकॉर्डों को अपनी गुणवत्ता वाला अन्य स्रोत मानें (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)। ध्यान रखें कि रोल-अप टीमों की लीग तालिकाओं में न बदलें।

सरकार और सार्वजनिक क्षेत्र। परिवर्तन रिकॉर्ड ऑडिट और जवाबदेही के लिए हैं, और रोलबैक कानून, खरीद या साझा प्लैटफ़ॉर्मों से सीमित हो सकते हैं। औपचारिक रिकॉर्ड रखें और विफलता की कड़ी को उसका हिस्सा बनाएँ। निगरानी निकायों को संख्याएँ गिनतियों और संदर्भ के साथ सावधानी से समझाएँ, क्योंकि महत्वपूर्ण सेवा में एक विफलता अनुपात से अधिक ध्यान खींच सकती है। डेटा का उपयोग कम-जोखिम परिवर्तन के लिए हल्के रास्तों को उचित ठहराने में करें, इस प्रमाण के साथ कि विफलता और बहाली स्थिर रहीं।

व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO

प्रेरणा विफल परिवर्तन की लागत है: घटना का काम, पुनर्कार्य, विलंबित रोडमैप मदें, और उपयोगकर्ता के भरोसे की हानि। कई संगठन नहीं बता सकते कि उनके प्रयास का कितना हाल के परिवर्तनों की मरम्मत में जाता है, और पुनर्कार्य का माप पहला ईमानदार उत्तर देता है। एक अप्रत्यक्ष लाभ भी है। जो टीमें दिखा सकती हैं कि परिवर्तन सुरक्षित है वे हल्के अनुमोदन का बचाव कर सकती हैं, जो लीड टाइम घटाता है। DORA शोध भारी बाहरी अनुमोदन और कमज़ोर डिलीवरी प्रदर्शन के बीच संबंध की रिपोर्ट करता है (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स), और विफलता का डेटा वही तरीका है जिससे टीम उस दावे को अपने इतिहास के विरुद्ध परखती है।

यदि बुनियादी काम मौजूद हो तो जुटाने की लागत मामूली है: घटना रिकॉर्ड में अनिवार्य फ़ील्ड, टैग किए सुधारात्मक डिप्लॉयमेंट, तीन डेटा स्रोतों का जोड़, और मासिक समीक्षा। बड़ी लागत ध्यान है, क्योंकि किसी को परिभाषा का स्वामी बनना, ऑडिट चलाना और निष्कर्षों पर कार्रवाई करनी होगी। परिभाषा और कड़ी हाथ से काम करने से पहले औज़ार खरीदने से बचें।

प्रतिफल कम दोहराई विफलताओं, छोटी बहाली, कम अनियोजित काम, और शासन के साथ बेहतर बातचीत के रूप में दिखता है। प्रतिशत का वादा न करें। इसके बजाय अपना बेसलाइन आँकें: एक तिमाही में परिवर्तन से जुड़े पुनर्कार्य और घटना की प्रतिक्रिया पर लगे घंटे गिनें, उन्हें अपनी सामान्य आंतरिक दर पर मूल्यांकित करें, और सुधारों के बाद तुलना करें। धारणाएँ बताएँ, और परिणाम को एकल आँकड़े के बजाय सीमा के रूप में रिपोर्ट करें। उसकी तुलना कार्यक्रम की लागत और महत्वपूर्ण सेवा में एक गंभीर विफलता की लागत से करें।

प्रतिरूप-विरोधी और जाल

  • विफलता दर का लक्ष्य रखना। यह पुनः-परिभाषा और छिपी विफलताओं को न्योता देता है। इसके बजाय सीखने का लक्ष्य रखें, जैसे हर समीक्षा पूरी करना और हर सुधारात्मक कार्रवाई बंद करना, और दर को रुझान के लिए देखें।
  • विफलता से टीमों या लोगों की रैंकिंग। यह रिपोर्टिंग नष्ट करता है और उन टीमों को दंडित करता है जो जोखिम भरा, मूल्यवान काम लेती हैं। टीम की तुलना उसके अपने अतीत से करें और संदर्भ पर चर्चा करें।
  • केवल घटनाओं को विफलता गिनना। जो विफलताएँ जल्दी पकड़ी और रोलबैक की गईं वे गायब हो जाती हैं। उपचार के हर रास्ते को शामिल करें, और घटनाओं को कई संकेतों में से एक की तरह इस्तेमाल करें।
  • आपातकालीन परिवर्तनों को बुरा मानना। दबाव छिपे हुए आपातकाल की ओर ले जाता है। उनके कारणों की समीक्षा करें और सामान्य रास्ता ठीक करें।
  • घटना की कड़ी को डिफ़ॉल्ट रूप से "नहीं" रहने देना। डिफ़ॉल्ट चापलूस और ग़लत संख्या बनाता है। फ़ील्ड अनिवार्य करें और नमूना जाँचें।
  • गिनतियों के बिना दर रिपोर्ट करना। छोटे नमूने बहुत झूलते हैं। गिनतियाँ और चलती खिड़की दिखाएँ।

परिपक्वता मॉडल

आयाम 1 आरंभ 2 विकास 3 मानकीकरण 4 प्रबंधन 5 समन्वयन
विफलता की परिभाषा जिससे पूछा जाए वह मामला-दर-मामला तय करता है कुछ टीमें परिभाषा लिखती हैं; टीमों में अंतर काम किए उदाहरणों और बताई खिड़की के साथ एक लिखित परिभाषा नमूना ऑडिट से परिभाषा परखी जाती है और सहमति मापी जाती है निर्णयों को सूचित करना बंद करने पर परिभाषा आपूर्तिकर्ताओं और ग्राहकों के साथ संशोधित
परिवर्तनों और घटनाओं को जोड़ना कड़ी लोगों को याद रहती है, यदि रहती है वैकल्पिक फ़ील्ड कुछ टीमें उपयोग करती हैं बिना डिफ़ॉल्ट वाला अनिवार्य फ़ील्ड, घटना-पश्चात समीक्षा में जाँचा हुआ कड़ी की दर का रुझान देखा और समीक्षित, अंतरों पर कार्रवाई सहमत इंटरफ़ेस से टीमों और आपूर्तिकर्ताओं के पार कड़ियाँ साझा
उपचार और आपातकालीन संचालन रोलबैक और हॉटफ़िक्स तदर्थ और अदर्ज संभाले जाते हैं कुछ टीमें रोलबैक और हॉटफ़िक्स टैग करती हैं उपचार के सभी रास्ते दर्ज; आपातकाल की परीक्षा लिखी हुई आपातकालीन परिवर्तनों की हर तिमाही समीक्षा; रोलबैक का अभ्यास बहाली के रास्ते सेवाओं में रचे हैं और टीमों के पार संयुक्त रूप से परखे जाते हैं
सुधार में उपयोग रिपोर्टों में उद्धृत संख्याएँ बिना अनुवर्ती के बड़ी घटनाओं के बाद विफलताओं पर चर्चा कार्रवाइयों सहित विफल परिवर्तनों की मासिक दोष-रहित समीक्षा विफलता और पुनर्कार्य गति से जुड़े; प्रयोग नियोजित और वित्तपोषित सुधार नियमित और टीमों में साझा, सीख प्रकाशित

जाँच-सूची

  • परिवर्तन की विफलता की लिखित परिभाषा मौजूद है, बताई खिड़की और कम से कम पाँच काम किए उदाहरणों के साथ।
  • गिनती की इकाई (परिवर्तन, डिप्लॉयमेंट या रिलीज़) मीट्रिक रजिस्टर में नामित है।
  • घटना रिकॉर्ड में बिना डिफ़ॉल्ट मान वाला अनिवार्य "परिवर्तन से हुई" फ़ील्ड है।
  • रोलबैक, हॉटफ़िक्स और रोल-फ़ॉरवर्ड सुधार डिप्लॉयमेंट या संस्करण नियंत्रण के औज़ारों में टैग हैं।
  • सुधारात्मक डिप्लॉयमेंट उस परिवर्तन की कड़ी रखते हैं जिसे वे ठीक करते हैं।
  • आपातकालीन परिवर्तन की छोटी लिखित परीक्षा है, और हर आपातकालीन परिवर्तन की दिनों की तय संख्या के भीतर समीक्षा होती है।
  • दरें गिनतियों और चलती खिड़की के साथ दिखाई जाती हैं, कभी अकेले प्रतिशत के रूप में नहीं।
  • परिवर्तन विफलता दर हमेशा लीड टाइम, डिप्लॉयमेंट की आवृत्ति और बहाली के समय के बगल में दिखाई जाती है।
  • त्रैमासिक नमूना ऑडिट विफलता के निर्णयों और घटना की कड़ी की जाँच करता है।
  • हर कार्रवाई के स्वामी सहित विफल परिवर्तनों की मासिक दोष-रहित समीक्षा चलती है।
  • इस विषय की कोई मीट्रिक व्यक्तियों की रैंकिंग या समीक्षा के लिए उपयोग नहीं होती।

AI प्रॉम्प्ट

परिवर्तन की विफलता की लिखित परिभाषा का मसौदा बनाएँ।

We operate [service or product type] with [team size] people and release
[frequency, for example several times a week]. Our tools are [change tool,
deployment tool, incident tool]. Draft a one-page definition of "failed change"
that states the unit (change, deployment, or release), the failure window, the
remediation routes that count (rollback, hotfix, roll-forward fix, linked
incident), and the exclusions. Include [number] worked examples, including
borderline cases. Do not invent benchmark values or thresholds; ask me for any
you need. List your assumptions.

परिवर्तन-से-घटना कड़ी की रचना करें।

Here is our incident record template: [fields]. Here is our change record
template: [fields]. Suggest how to record which change caused which incident,
including a required field, allowed values, who completes it, and how a review
should check it. Propose a way to suggest candidate changes automatically from
[available data, for example deploy times and service names]. Do not guess how our
tools are configured. List your assumptions and the questions I should answer.

पैटर्न के लिए विफल परिवर्तनों की सूची का विश्लेषण करें।

Below are [number] failed changes from [period], with these fields: [list fields,
for example size, type, day and time, service, remediation route, time to
restore]. Find patterns and possible contributing factors, and suggest up to
[number] small, reversible experiments to reduce failures. Keep the analysis at
the level of teams and services, and do not rank individuals. Do not invent
statistics or benchmark values. State how confident each pattern is given the
sample size, and list your assumptions.

विफलता के डैशबोर्ड में गेमिंग के जोखिम जाँचें।

Our dashboard shows [list of metrics, for example change fail rate, emergency
share, rollback rate, hotfix rate, rework rate] with these definitions:
[definitions]. For each metric, list plausible ways the number could improve
without the service improving, and a guardrail for each. Suggest two audit checks
a team of [team size] could run each quarter. Do not invent benchmark values or
compliance claims. List your assumptions.

AI स्किल

  • Service Management Metrics skill: यह खोजने के लिए उपयोग करें कि लीड टाइम या घटना की अवधि जैसी संबंधित मीट्रिक कौन-सा विषय परिभाषित करता है और विफलता दर के बगल में रखने की सुरक्षा-रेखा क्या है।
  • Service Management Metrics maintainer skill: यह जाँचने के लिए उपयोग करें कि नई या संपादित विफलता की मीट्रिक अपनी घड़ी, अपना स्रोत और अपना गेमिंग का रास्ता बताती है।

मुख्य निष्कर्ष

  • परिवर्तन विफलता दर उतनी ही अच्छी है जितनी उसकी परिभाषा, इसलिए खिड़की, काम किए उदाहरणों और नामित इकाई के साथ एक लिखें।
  • घटना रिकॉर्ड के अनिवार्य फ़ील्ड से हर विफलता को उसके परिवर्तन से जोड़ें, और कड़ी की दर मापें।
  • रोलबैक, हॉटफ़िक्स, रोल-फ़ॉरवर्ड सुधार और जुड़ी घटनाएँ साथ गिनें, ताकि टीमें रास्ता बदलकर माप से न बच सकें।
  • आपातकालीन परिवर्तन के हिस्से और पुनर्कार्य को योजना और सामान्य रास्ते के बारे में संकेत की तरह पढ़ें, अंक की तरह नहीं।
  • विफलता हमेशा गति और बहाली के बगल में, गिनतियों और चलती खिड़की के साथ दिखाएँ, और लोगों की रैंकिंग कभी न करें।

संदर्भ और आगे का अध्ययन

  1. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  2. DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
  3. Humble, J., and Farley, D., Continuous Delivery: Reliable Software Releases through Build, Test, and Deployment Automation, Addison-Wesley, 2010.
  4. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  5. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  6. Wikipedia, ITIL.
  7. Wikipedia, Feature toggle.
  8. Wikipedia, Rollback (data management).
  9. Wikipedia, Hotfix.
  10. Wikipedia, Rework.
  11. Wikipedia, Continuous delivery.
  12. Wikipedia, Goodhart's law.
  13. Wikipedia, Regression testing.
  14. Wikipedia, Canary release.