रिलीज़ और डिप्लॉयमेंट मीट्रिक्स
कोड को डिप्लॉय करना और उसे उपयोगकर्ताओं के लिए रिलीज़ करना अलग जोखिम वाली अलग घटनाएँ हैं, इसलिए उन्हें अलग मापें, हर एक को लिखित नियम से गिनें, और किसी एक गिनती का जश्न मनाने के बजाय आवृत्ति, लीड टाइम, बैच का आकार और फ़्लैग की स्वच्छता को साथ पढ़ें।
अवलोकन और प्रेरणा
कई टीमें "डिप्लॉयमेंट" और "रिलीज़" शब्दों को ऐसे इस्तेमाल करती हैं मानो उनका एक ही अर्थ हो। उनका नहीं है, और यह अंतर इस विषय का सबसे उपयोगी विचार है। डिप्लॉयमेंट सॉफ़्टवेयर के किसी संस्करण को परिवेश में, आमतौर पर उत्पादन में, रखने की क्रिया है, जैसा सॉफ़्टवेयर डिप्लॉयमेंट (software deployment) पर लेख में वर्णित है। रिलीज़ वह क्षण है जब परिवर्तन अपने इच्छित उपयोगकर्ताओं को उपलब्ध होता है, एक निर्णय जिसे शासित करने के लिए रिलीज़ प्रबंधन (release management) है। जब दोनों साथ होते हैं, तो डिप्लॉयमेंट रिलीज़ है और एक संख्या दोनों का वर्णन करती है। जब उन्हें अलग किया जाता है, तो टीम अक्सर और चुपचाप डिप्लॉय कर सकती है, और सोच-समझकर रिलीज़।
अलगाव इसलिए मायने रखता है कि दोनों घटनाओं के जोखिम अलग हैं। डिप्लॉयमेंट में तकनीकी जोखिम है: नया बिल्ड शुरू होने में विफल हो सकता है, किसी निर्भरता को तोड़ सकता है, या रोलबैक की ज़रूरत पड़ सकती है। रिलीज़ में व्यावसायिक और उपयोगकर्ता का जोखिम है: परिवर्तन ग्राहकों को भ्रमित कर सकता है, या सहमत तिथि पर उतरना ज़रूरी हो सकता है। जो टीमें दोनों घटनाओं को जोड़ती हैं वे दोनों जोखिम एक साथ स्वीकार करती हैं, जो उन्हें शायद ही रिलीज़ होने वाले परिवर्तन के बड़े बैच की ओर धकेलता है। जो टीमें उन्हें अलग करती हैं वे तकनीकी जोखिम छोटे चरणों में और उपयोगकर्ता का जोखिम नियंत्रित चरणों में लेती हैं।
अलगाव का मुख्य औज़ार फ़ीचर टॉगल (feature toggle) है, जिसे फ़ीचर फ़्लैग भी कहते हैं: कॉन्फ़िगरेशन में स्विच जो नए डिप्लॉयमेंट के बिना व्यवहार चालू या बंद करता है। संबंधित तकनीकों में कैनरी रिलीज़ (canary release) शामिल है, जो परिवर्तन को पहले ट्रैफ़िक के छोटे हिस्से के सामने रखता है, और ब्लू-ग्रीन डिप्लॉयमेंट (blue-green deployment), जो दो उत्पादन परिवेश रखता है और ट्रैफ़िक उनके बीच बदलता है। ये सब आपको दो अलग प्रश्नों का उत्तर देने देते हैं: क्या नया संस्करण सुरक्षित चल रहा है, और नया व्यवहार किसे और कब दिखना चाहिए।
नीचे दिए शब्द इस विषय में बार-बार आते हैं।
- रिलीज़ संस्करण या परिवर्तनों का सेट है जो उपयोगकर्ताओं को उपलब्ध कराया गया।
- डिप्लॉयमेंट संस्करण का परिवेश में जाना है। ITIL 4 इसके लिए प्रैक्टिस नामित करता है, डिप्लॉयमेंट प्रबंधन।
- डार्क लॉन्च (dark launch) वह डिप्लॉयमेंट है जिसका नया व्यवहार उपयोगकर्ताओं के लिए बंद है।
- प्रगतिशील रोलआउट (progressive rollout) वह रिलीज़ है जो चरणों में पहुँच बढ़ाती है, उदाहरण के लिए 1 प्रतिशत, 10 प्रतिशत, फिर सब।
- बैच परिवर्तनों का वह सेट है जो एक डिप्लॉयमेंट या रिलीज़ में साथ जाता है। बैच का आकार उसमें परिवर्तनों की संख्या, या परिवर्तन की मात्रा है।
- रिलीज़ का लीड टाइम बताए आरंभ-बिंदु से परिवर्तन के उपयोगकर्ताओं को उपलब्ध होने तक का बीता समय है। आपकी टीम आरंभ-बिंदु लिखती है, क्योंकि कई प्रचलित हैं।
- परसेंटाइल वह मान है जिसके नीचे प्रेक्षणों का बताया हिस्सा आता है। रिलीज़ के लीड टाइम का 85वाँ परसेंटाइल वह संख्या है जिसे 85 प्रतिशत रिलीज़ हरा देती हैं।
एजाइल और ITIL के दृष्टिकोण यहाँ मिलते हैं। निरंतर डिलीवरी (continuous delivery) का अनुसरण करने वाली एजाइल टीम चाहती है कि हर परिवर्तन किसी भी समय रिलीज़ होने योग्य हो, और रिलीज़ को तकनीकी कार्य से अलग लिया गया व्यावसायिक निर्णय मानती है। ITIL व्यवसायी रिलीज़ प्रबंधन, डिप्लॉयमेंट प्रबंधन और परिवर्तन सक्षमीकरण को ऐसी प्रैक्टिसें मानता है जो परिवर्तन के चालू उपयोग में जाने की योजना, निर्धारण और नियंत्रण करती हैं। दोनों दृष्टिकोण तब टकराते हैं जब रिलीज़ प्रबंधन को बड़ी घटनाओं का कैलेंडर समझा जाए। वे तब साथ बैठते हैं जब प्रैक्टिस को माँग पर सुरक्षित रिलीज़ करने की क्षमता समझा जाए, पाइपलाइन और फ़्लैगों में बने नियंत्रणों के साथ।
यह विषय DORA शोध कार्यक्रम के पाँच डिलीवरी प्रदर्शन मापों की परिभाषाएँ नहीं दोहराता (देखें विषय 2.8, DORA मीट्रिक्स), न रिलीज़ के बाद की विफलता और पुनर्कार्य के माप (देखें विषय 4.4, परिवर्तन की विफलता और पुनर्कार्य), न परिवर्तनों की मात्रा और अनुमोदन (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)। यह वह जोड़ता है जो वे विषय खुला छोड़ते हैं: रिलीज़ों को डिप्लॉयमेंट से अलग कैसे गिनें, पूरा हुआ परिवर्तन उपयोगकर्ताओं को मिलने से पहले कितनी देर प्रतीक्षा करता है, बैच कितने बड़े हैं, और क्या अलगाव को संभव बनाने वाले फ़्लैग सुव्यवस्थित रखे जा रहे हैं।
अंत में, रिलीज़ और डिप्लॉयमेंट की गिनतियाँ नेतृत्व के डैशबोर्ड के लिए ललचाने वाली संख्याएँ हैं, और गुडहार्ट का नियम (Goodhart's law) तुरंत लागू होता है (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)। परिवर्तनों को मामूली टुकड़ों में बाँटने पर डिप्लॉयमेंट की गिनती बढ़ती है। लेबल बदलने पर रिलीज़ों की गिनती बढ़ती है। इसलिए नीचे की हर मीट्रिक उस तरीके के साथ आती है जिससे वह मुड़ती है और उस सुरक्षा-रेखा के साथ जो मोड़ को पकड़ती है।
मुख्य सिद्धांत
- डिप्लॉयमेंट और रिलीज़ दो घटनाएँ हैं। जहाँ आर्किटेक्चर अनुमति दे वहाँ उन्हें अलग मापें, और स्पष्ट कहें कि वे कहाँ अब भी एक घटना हैं।
- लिखित नियम से गिनें। डिप्लॉयमेंट तब गिना जाता है जब नामित परिवेश को नामित संस्करण सफल परिणाम के साथ मिला। रिलीज़ तब गिनी जाती है जब इच्छित उपयोगकर्ता परिवर्तन तक पहुँच सकते हैं। नियम एक बार लिखें और हर बार एक तरह लागू करें।
- सेवा का वर्णन करें, व्यक्ति का नहीं। गिनतियाँ सेवा और उसकी टीम की हैं, किसी व्यक्ति की कभी नहीं।
- केवल काम नहीं, प्रतीक्षा मापें। रिलीज़ के लीड टाइम में अक्सर किसी खिड़की, अनुमोदन या निर्णय की प्रतीक्षा के दिन होते हैं। प्रतीक्षा वह जगह है जहाँ सुधार आमतौर पर रहता है।
- छोटे बैच ही उपाय हैं। आवृत्ति और आकार एक चीज़ के दो दृश्य हैं। हर गिनती को इस माप से जोड़ें कि हर रिलीज़ कितना परिवर्तन लेकर गई।
- फ़्लैग वहन-लागत वाली सूची हैं। जो फ़्लैग बहुत लंबे जिएँ वे मृत कोड और विफलता का स्रोत बन जाते हैं, इसलिए फ़्लैग की आयु उतनी ही सावधानी से ट्रैक करें जितनी फ़्लैग की कवरेज।
मीट्रिक परिभाषाएँ
| मीट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL प्रैक्टिस | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| डिप्लॉयमेंट की आवृत्ति | सेवा को उत्पादन में कितनी बार सफल डिप्लॉयमेंट मिलता है | अवधि में सेवा के सफल उत्पादन डिप्लॉयमेंट की गिनती / अवधि के दिन; परीक्षण या स्टेजिंग परिवेश के डिप्लॉयमेंट, विफल या रोलबैक हुए डिप्लॉयमेंट, और अपरिवर्तित बिल्ड के पुनः-डिप्लॉयमेंट शामिल नहीं; केवल-कॉन्फ़िगरेशन डिप्लॉयमेंट अलग शृंखला में गिने जाते हैं | प्रति दिन या प्रति सप्ताह डिप्लॉयमेंट | डिप्लॉयमेंट पाइपलाइन का घटना लॉग | डिप्लॉयमेंट प्रबंधन | निरंतर डिलीवरी; चालू इंक्रीमेंट भेजना | साप्ताहिक |
| रिलीज़ की आवृत्ति | उपयोगकर्ताओं को कितनी बार वह परिवर्तन मिलता है जिस तक वे पहुँच सकते हैं | अवधि में रिलीज़ घटनाओं की गिनती / अवधि के दिन; रिलीज़ घटना वह क्षण है जब परिवर्तन, या परिवर्तनों का समूह, अपने इच्छित उपयोगकर्ताओं की पहुँच में आता है (सभी उपयोगकर्ताओं के लिए चालू किया फ़्लैग, प्रगतिशील रोलआउट का अंतिम चरण, या बिना फ़्लैग के परिवर्तन का डिप्लॉयमेंट); डार्क लॉन्च, आंशिक चरण पर रुका रोलआउट, और केवल आंतरिक उपयोगकर्ताओं को प्रभावित करने वाला फ़्लैग का बदलाव शामिल नहीं | प्रति सप्ताह या प्रति माह रिलीज़ | पाइपलाइन लॉग और रिलीज़ कैलेंडर से जुड़ा फ़्लैग सेवा का ऑडिट लॉग | रिलीज़ प्रबंधन | हर इंक्रीमेंट के अंत में रिलीज़; संभावित रूप से भेजने योग्य इंक्रीमेंट उपलब्ध कराया गया | साप्ताहिक, मासिक समीक्षित |
| रिलीज़ का लीड टाइम | पूरे हुए परिवर्तन के उपयोगकर्ताओं तक पहुँचने से पहले कितनी देर प्रतीक्षा करता है | घड़ी तब शुरू होती है जब परिवर्तन मुख्य रेखा में मर्ज हो और अपनी स्वचालित जाँचें पास कर चुका हो (या, यदि आपकी टीम ऐसा लिखती है, पहले कमिट पर) और तब रुकती है जब परिवर्तन ऊपर परिभाषित अनुसार रिलीज़ होता है; अवधि में रिलीज़ परिवर्तनों का माध्य और 85वाँ परसेंटाइल रिपोर्ट करें; जो परिवर्तन अभी रिलीज़ नहीं हुए वे शामिल नहीं और प्रतीक्षा करते काम की आयु के रूप में रिपोर्ट होते हैं | घंटे या दिन | पाइपलाइन और फ़्लैग ऑडिट लॉग से जुड़ा संस्करण नियंत्रण | रिलीज़ प्रबंधन; डिप्लॉयमेंट प्रबंधन | पूर्ण से डिलीवर तक लीड टाइम; ग्राहक तक लीड टाइम | साप्ताहिक, मासिक समीक्षित |
| डिप्लॉयमेंट से रिलीज़ तक का अंतर | डिप्लॉय किया कोड उपयोगकर्ताओं की पहुँच में आने से पहले कितनी देर डार्क रहता है | घड़ी तब शुरू होती है जब परिवर्तन उत्पादन में डिप्लॉय होता है और रिलीज़ होने पर रुकती है; माध्य और 85वाँ परसेंटाइल रिपोर्ट करें; डिप्लॉयमेंट के क्षण पर रिलीज़ हुए परिवर्तनों का अंतर शून्य है और वे शामिल हैं; जो परिवर्तन डिप्लॉय हुए और बाद में बिना रिलीज़ के हटाए गए वे शामिल नहीं और अलग गिने जाते हैं | घंटे या दिन | फ़्लैग ऑडिट लॉग से जुड़ा पाइपलाइन लॉग | रिलीज़ प्रबंधन; डिप्लॉयमेंट प्रबंधन | डार्क लॉन्च; डिप्लॉयमेंट को रिलीज़ से अलग करना | मासिक |
| रिलीज़ बैच का आकार | एक रिलीज़ में कितना परिवर्तन साथ जाता है | अवधि में प्रति रिलीज़ मर्ज किए परिवर्तनों (पुल रिक्वेस्ट या कार्य-मदों) की संख्या का माध्य और 85वाँ परसेंटाइल; परिवर्तन की इकाई लिखी जाती है; हर परिवर्तन उस रिलीज़ में एक बार गिना जाता है जिसने उसे पहुँच में किया | प्रति रिलीज़ परिवर्तन | रिलीज़ घटना से जुड़े संस्करण नियंत्रण और इश्यू ट्रैकर | रिलीज़ प्रबंधन; परिवर्तन सक्षमीकरण | छोटे बैच; काम के ऊर्ध्वाधर टुकड़े | प्रति रिलीज़, मासिक समीक्षित |
| फ़ीचर फ़्लैग कवरेज | उपयोगकर्ता को दिखने वाले परिवर्तनों का हिस्सा जो फ़्लैग के पीछे रिलीज़ हुए | अवधि में रिलीज़ उपयोगकर्ता-दृश्य परिवर्तन जिनके रिलीज़ के समय फ़्लैग था / अवधि में रिलीज़ सभी उपयोगकर्ता-दृश्य परिवर्तन; इंफ्रास्ट्रक्चर परिवर्तन और दोष-सुधार जिन्हें फ़्लैग नहीं किया जा सकता शामिल नहीं, और "उपयोगकर्ता-दृश्य" का नियम लिखा जाता है | प्रतिशत | इश्यू ट्रैकर और रिलीज़ लॉग से जुड़ी फ़्लैग सेवा | रिलीज़ प्रबंधन; परिवर्तन सक्षमीकरण | प्रगतिशील डिलीवरी; प्रयोग-प्रेरित विकास | मासिक |
| बासी फ़्लैग की गिनती | कितने फ़्लैग अपने उद्देश्य से अधिक जी चुके हैं | कोड या कॉन्फ़िगरेशन में अब भी मौजूद रिलीज़ फ़्लैगों की संख्या, जो उस परिवर्तन के सभी उपयोगकर्ताओं तक पहुँचने के बाद दिनों की बताई संख्या से अधिक है जिसकी वे रक्षा करते हैं; स्थायी परिचालन फ़्लैग (किल स्विच, पात्रता फ़्लैग) टैग किए और बाहर रखे जाते हैं; आयु-सीमा फ़्लैग के प्रकार के अनुसार लिखी जाती है | फ़्लैग, और रिलीज़ फ़्लैगों की दिनों में माध्य आयु | कोड खोज से जुड़ी फ़्लैग सेवा की सूची | रिलीज़ प्रबंधन; ज्ञान प्रबंधन | तकनीकी ऋण की सफ़ाई; फ़्लैग हटाने की पूर्णता कसौटी | मासिक |
सिफ़ारिशें
लिखें कि डिप्लॉयमेंट और रिलीज़ क्या गिने जाते हैं
किसी को भी गिनने से पहले दोनों घटनाएँ परिभाषित करें। डिप्लॉयमेंट तब गिना जाता है जब नामित संस्करण नामित परिवेश तक पहुँचा और पाइपलाइन ने सफलता रिपोर्ट की। रिलीज़ तब गिनी जाती है जब इच्छित उपयोगकर्ता परिवर्तन तक पहुँच सकते हैं, जो फ़्लैग वाले परिवर्तन के लिए वह क्षण है जब उनके लिए फ़्लैग चालू किया गया, वह नहीं जब कोड पहुँचा। उसी वाक्य में अपवर्जन बताएँ: परीक्षण परिवेश, रोलबैक, अपरिवर्तित बिल्ड के पुनः-डिप्लॉयमेंट, और केवल-आंतरिक पहुँच।
दो शृंखलाओं को साथ-साथ रिपोर्ट करें
डिप्लॉयमेंट की आवृत्ति और रिलीज़ की आवृत्ति एक चार्ट पर दिखाएँ। जहाँ रेखाएँ संपाती हैं, वहाँ सेवा अब भी दोनों घटनाओं को जोड़ती है। जहाँ डिप्लॉयमेंट रिलीज़ों से काफ़ी आगे चलते हैं, वहाँ टीम ने उन्हें अलग करना शुरू कर दिया है, और रेखाओं के बीच की दूरी क्षमता का संकेत है। एक संयुक्त संख्या यह छिपाती है, और टीम को ऊँची आवृत्ति का दावा करने देती है जिसे उपयोगकर्ता कभी नहीं देखते।
रिलीज़ का लीड टाइम बताए आरंभ से उपयोगकर्ता तक मापें
घड़ी का आरंभ एक बार चुनें और उसे रखें। पहले कमिट पर शुरू करना पूरी यात्रा दिखाता है, और मुख्य रेखा में मर्ज पर शुरू करना रिलीज़ पाइपलाइन और उसके अनुमोदनों को अलग करता है। दोनों स्वीकार्य हैं यदि चार्ट पर बताए गए हैं और चुपचाप कभी बदले नहीं जाते। घड़ी रिलीज़ पर समाप्त करें, डिप्लॉयमेंट पर नहीं, अन्यथा माप वह नहीं मापता जिसकी उपयोगकर्ता ने प्रतीक्षा की।
आवृत्ति के बगल में बैच का आकार ट्रैक करें
हर आवृत्ति को आकार से जोड़ें। टीम एक परिवर्तन को ऐसे टुकड़ों में काटकर डिप्लॉयमेंट की गिनती बढ़ा सकती है जो अपने आप उपयोगी नहीं हैं, और गिनती बढ़ती है जबकि असली प्रवाह वही रहता है। बैच के आकार का माध्य और 85वाँ परसेंटाइल दिखाते हैं कि टुकड़े असली हैं या नहीं। छोटे बैच की रिव्यू, परीक्षण और रोलबैक आसान है, और वही लाभ है जिसका आवृत्ति प्रॉक्सी है।
प्रगतिशील रोलआउट के चरणों को घटनाएँ मानें
रोलआउट के हर चरण को टाइमस्टैम्प के साथ दर्ज करें। जो रोलआउट 1 प्रतिशत से 10 प्रतिशत और फिर सब तक जाता है उसके तीन टाइमस्टैम्प होते हैं, और हर एक रुकने का मौका है। चरण, पहुँच का हिस्सा, और उस स्वास्थ्य जाँच का परिणाम दर्ज करें जिसने अगले चरण की अनुमति दी। इससे आप असली संकेत पर रोके गए रोलआउट को ठप पड़े रोलआउट से अलग कर सकते हैं।
स्वामी और समाप्ति तिथि के साथ फ़्लैग की सूची रखें
हर रिलीज़ फ़्लैग को बनाते समय स्वामी, उद्देश्य और हटाने की नियोजित तिथि दें। फ़्लैग सेवा या सादा रजिस्टर इन्हें रख सकता है। हर महीने रजिस्टर की समीक्षा करें और बासी फ़्लैग की गिनती निकालें। पूर्ण रोलआउट के बाद चालू छोड़ा फ़्लैग मृत कोड है जो अब भी शाखाएँ बनाता है। हटाने को परिवर्तन की पूर्णता का हिस्सा मानें।
फ़्लैग को प्रकार से टैग करें
अस्थायी रिलीज़ फ़्लैग को स्थायी परिचालन फ़्लैग से अलग करें। किल स्विच और पात्रता फ़्लैग रचना से स्थायी हैं, जबकि रिलीज़ फ़्लैग पूर्ण रोलआउट के बाद हटाए जाने चाहिए। प्रकार मिलाने से बासी गिनती शोर वाली होती है और टीमों को वह स्विच हटाने को न्योता मिलता है जिसकी घटना के दौरान किसी को ज़रूरत है। फ़्लैग बनाते समय प्रकार आवश्यक करें।
रिलीज़ को घटना और परिवर्तन के रिकॉर्डों से जोड़ें
घटना और परिवर्तन पर रिलीज़ का पहचानकर्ता दर्ज करें। रिलीज़ घटना घटना औज़ार से अनुरेखित होनी चाहिए, ताकि घटना का कारण उस परिवर्तन से जोड़ा जा सके जो रिलीज़ हुआ, चाहे वह पिछले सप्ताह डिप्लॉय हुआ हो या आज सुबह चालू किया गया हो। कड़ी के बिना, अस्थिरता के माप विफलताओं को डिप्लॉयमेंट की तिथि से जोड़ते हैं और फ़्लैग बदलने से हुई विफलताएँ चूक जाते हैं। उत्पादन में फ़्लैग बदलना ITIL के अर्थ में परिवर्तन हैं और परिवर्तन सक्षमीकरण को दिखने चाहिए, भले ही वे मानक परिवर्तन के रूप में पूर्व-अधिकृत हों (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)।
गेमिंग के रास्ते और सुरक्षा-रेखाएँ
| मीट्रिक | इसमें गेमिंग कैसे होती है | जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा |
|---|---|---|
| डिप्लॉयमेंट की आवृत्ति | एक परिवर्तन को मामूली डिप्लॉयमेंटों में बाँटना; अपरिवर्तित बिल्ड पुनः-डिप्लॉय करना; स्टेजिंग के डिप्लॉयमेंट गिनना; केवल-कॉन्फ़िगरेशन डिप्लॉयमेंट को मुख्य शृंखला के साथ गिनना | रिलीज़ बैच का आकार और उपयोगकर्ता-दृश्य परिवर्तन वाले डिप्लॉयमेंटों का हिस्सा; अलग कॉन्फ़िगरेशन शृंखला; उसके बगल में परिवर्तन विफलता दर |
| रिलीज़ की आवृत्ति | डिप्लॉयमेंट को रिलीज़ के रूप में दोबारा लेबल करना; आंतरिक कर्मचारियों के लिए चालू किए फ़्लैग को रिलीज़ गिनना; लक्ष्य पूरा करने के लिए खाली या कॉस्मेटिक परिवर्तन रिलीज़ करना; रोलआउट के हर चरण को अलग रिलीज़ गिनना | रिलीज़ की लिखित परिभाषा; हर तिमाही उपयोगकर्ता-दृश्य परिवर्तनों के विरुद्ध जाँची रिलीज़ों का नमूना; बैच का आकार और ग्राहक-मुखी परिवर्तनों की गिनतियाँ |
| रिलीज़ का लीड टाइम | घड़ी देर से शुरू करना, जैसे मर्ज की जगह अनुमोदन पर; देर से प्रतीक्षा करने वाले परिवर्तनों को "अवरुद्ध" कहकर बाहर रखना; माध्य नीचे लाने के लिए पहले मामूली परिवर्तन रिलीज़ करना; घड़ी को डिप्लॉयमेंट पर समाप्त करना | 85वाँ परसेंटाइल और प्रतीक्षा करते सबसे पुराने परिवर्तन की आयु; घड़ी का निश्चित लिखित आरंभ; सबसे धीमे 10 प्रतिशत परिवर्तनों की त्रैमासिक समीक्षा |
| डिप्लॉयमेंट से रिलीज़ तक का अंतर | रिलीज़ जल्दी दर्ज करने के लिए प्रतीकात्मक उपयोगकर्ता के लिए फ़्लैग चालू करना; लंबे समय से डार्क कोड को "रिलीज़ नहीं" कहकर नमूने से बाहर रखना; लंबे अंतर से बचने के लिए डार्क कोड मिटाना | रिलीज़ पर पहुँच का हिस्सा (रिलीज़ गिनने की सीमा); बिना रिलीज़ के डिप्लॉय होकर हटाए परिवर्तनों की गिनती; बासी फ़्लैग की गिनती |
| रिलीज़ बैच का आकार | काम को कृत्रिम पुल रिक्वेस्टों में बाँटना; रिलीज़ों की संख्या घटाने के लिए असंबद्ध परिवर्तनों को एक में मिलाना; बंडल में केवल बड़े परिवर्तन को गिनना | संदर्भ माप के रूप में पंक्तियों या फ़ाइलों में परिवर्तन का माध्य आकार; असंबद्ध बंडल के लिए रिलीज़ों के नमूने की समीक्षा; आकार के बगल में आवृत्ति |
| फ़ीचर फ़्लैग कवरेज | दर बढ़ाने के लिए मामूली परिवर्तनों में फ़्लैग जोड़ना; केवल सुरक्षित परिवर्तनों को फ़्लैग करना और जोखिम भरे को बिना फ़्लैग के भेजना; ऐसा फ़्लैग बनाना जिसे व्यवहार में बंद करने का रास्ता नहीं | फ़्लैगों के नमूने के फ़्लैग-बंद परीक्षण के परिणाम; बासी फ़्लैग की गिनती; वे घटना के कारण जिनमें फ़्लैग नहीं था |
| बासी फ़्लैग की गिनती | बासी गिनती से बचने के लिए रिलीज़ फ़्लैगों को स्थायी के रूप में दोबारा टैग करना; कोड में छोड़कर फ़्लैग का रिकॉर्ड मिटाना; समीक्षा के बिना समाप्ति की तिथियाँ बढ़ाना | रजिस्टर के विरुद्ध कोड खोज का समय-समय पर उपयोग; फ़्लैग के प्रकार के हर बदलाव की समीक्षा; सबसे पुराने रिलीज़ फ़्लैग की आयु |
स्वस्थ पठन फ़्लैग इस्तेमाल करने वाली सेवाओं के लिए डिप्लॉयमेंटों को रिलीज़ों से आगे चलते दिखाता है, मामूली अंतर के साथ, छोटे और स्थिर बैच के आकार के साथ, और ऐसे लीड टाइम के 85वें परसेंटाइल के साथ जो माध्य से बहुत ऊपर नहीं। जोखिम भरे परिवर्तनों के लिए फ़्लैग कवरेज ऊँची है, और बासी फ़्लैग की गिनती कम या घटती है। जो पठन बहुत अच्छा लगे, जैसे बढ़ते बैच के साथ ऊँची आवृत्ति या स्थायी फ़्लैगों की बढ़ती गिनती के साथ शून्य बासी गिनती, वह जश्न से पहले नमूना ऑडिट का हकदार है।
समझौते: लाभ और हानि
| तरीका | ताकत | कमज़ोरी |
|---|---|---|
| निरंतर डिप्लॉय करना और फ़्लैग से रिलीज़ करना | हर डिप्लॉयमेंट का छोटा तकनीकी जोखिम; रिलीज़ का समय व्यावसायिक चुनाव बनता है; तेज़ स्विच-ऑफ़ | फ़्लैग का अनुशासन और औज़ार चाहिए; ऐसे कोड पथ जोड़ता है जिन्हें परखना और हटाना पड़ता है |
| डिप्लॉयमेंट और रिलीज़ को जोड़ना | समझाना सरल; गिनने के लिए एक घटना; फ़्लैग का ऋण नहीं | हर रिलीज़ तकनीकी और उपयोगकर्ता दोनों जोखिम वहन करती है, जो शायद ही रिलीज़ होने वाले बड़े बैच को प्रोत्साहित करता है |
| निर्धारित रिलीज़ ट्रेन | सहायता और नियामकों के लिए पूर्वानुमेय | परिवर्तन अगली ट्रेन की प्रतीक्षा करते हैं; गिनती क्षमता नहीं, कैलेंडर को दर्शाती है |
| प्रतिशत के अनुसार प्रगतिशील रोलआउट | ख़राब रिलीज़ का असर सीमित करता है; हर चरण पर प्रमाण पैदा करता है | अच्छी टेलीमेट्री और स्वास्थ्य जाँच चाहिए; मिले-जुले संस्करण कुछ समय साथ चल सकते हैं |
| डिप्लॉयमेंट और रिलीज़ दोनों गिनना | अलगाव और प्रतीक्षा दिखाता है | फ़्लैग ऑडिट लॉग या रिलीज़ रिकॉर्डों को पाइपलाइन से जोड़ना पड़ता है |
जो सेवा अभी डिप्लॉयमेंट को रिलीज़ से अलग नहीं कर सकती, उदाहरण के लिए ऐप स्टोर की समीक्षा से वितरित मोबाइल एप्लिकेशन, उसे जो मापा जा सके वह मापना चाहिए: रिलीज़ की आवृत्ति, रिलीज़ का लीड टाइम और बैच का आकार, स्टोर समीक्षा के समय को अलग प्रतीक्षा के रूप में रिपोर्ट करके।
अपनी टीम के साथ चर्चा के प्रश्न
1. क्या हम "डिप्लॉयमेंट" और "रिलीज़" शब्द एक ही घटना के लिए इस्तेमाल करते हैं, और क्या वह इससे मेल खाता है जो होता है? तीन लोगों से आखिरी चालू हुए परिवर्तन का वर्णन करने को कहें और नोट करें कि कोड कब पहुँचा और उपयोगकर्ता पहली बार उसका उपयोग कब कर पाए। सूत्रधार समूह को हर शब्द के लिए एक वाक्य पर सहमत होने और यह तय करने में मदद करे कि हर मौजूदा डैशबोर्ड संख्या दोनों घटनाओं में से कौन-सी मापती है।
2. पूरा हुआ परिवर्तन रिलीज़ की सबसे अधिक कितनी देर प्रतीक्षा कर चुका है, और क्यों? सबसे पुराना मर्ज किया परिवर्तन निकालें जिस तक उपयोगकर्ता अब भी नहीं पहुँच सकते। मर्ज से अब तक उसका रास्ता खोजें और रास्ते की हर प्रतीक्षा लिखें।
3. यदि हमारे डिप्लॉयमेंट की गिनती दोगुनी हो जाए, तो उसे अच्छी खबर कहने से पहले हम क्या जाँचेंगे? समूह को वे तरीके नामित करने को आमंत्रित करें जिनसे उपयोगकर्ताओं तक अधिक मूल्य पहुँचे बिना गिनती बढ़ सकती है। बैच का आकार, उपयोगकर्ता-दृश्य परिवर्तन वाले डिप्लॉयमेंटों का हिस्सा, और विफलता तथा पुनर्कार्य के आँकड़े देखें। सूत्रधार नोट करे कि इनमें से कौन-सी जाँचें डैशबोर्ड पर पहले से हैं और लक्ष्य रखने से पहले किन्हें जोड़ना है।
4. हमारे कौन-से फ़्लैग मिटाने से हम डरेंगे, और यह हमें क्या बताता है? फ़्लैग रजिस्टर पर चलें और तीन सबसे पुराने चुनें। पूछें कि हर एक का स्वामी कौन है, वह किसकी रक्षा करता है, और हटाने पर क्या होगा। मिटाने का डर आमतौर पर लापता परीक्षण, लापता स्वामी, या उद्देश्य के लापता रिकॉर्ड का अर्थ है। कम से कम एक के लिए हटाने की तिथि और उस जाँच पर सहमत हों जो हटाना सुरक्षित बनाएगी।
5. परिवर्तन कब रिलीज़ हो यह कौन तय करता है, और क्या उनके पास ज़रूरी जानकारी है? जहाँ रिलीज़ व्यावसायिक चुनाव है, वहाँ उसे लेने वाले व्यक्ति को रोलआउट की स्थिति, स्वास्थ्य संकेत और सहायता की तैयारी देखनी चाहिए। पूछें कि वे तथ्य आज कहाँ रहते हैं और निर्णय लेने वाला रिलीज़ को कितनी जल्दी पलट सकता है।
6. पिछली तिमाही में कौन-सी रिलीज़ सबसे ख़राब गई, और कौन-सा माप हमें चेतावनी देता? एक ऐसी रिलीज़ चुनें जिसने परेशानी पैदा की और समय-रेखा साथ पढ़ें। पूछें कि क्या बैच बड़ा था, अंतर लंबा था, रोलआउट के चरण थे, और क्या कोई फ़्लैग नुकसान सीमित कर सकता था। इसके परिणामस्वरूप जोड़ने के लिए एक माप या कसने के लिए एक सीमा चुनें।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
डिलीवरी टीमें इन मापों का उपयोग यह देखने के लिए करती हैं कि उनकी पाइपलाइन और फ़्लैग सचमुच उन्हें पहुँच पर नियंत्रण देते हैं या नहीं। सबसे उपयोगी दृश्य अंतर, बैच का आकार, और प्रतीक्षा करते सबसे पुराने परिवर्तन की आयु हैं, क्योंकि हर एक उस चीज़ की ओर इशारा करता है जिसे टीम बदल सकती है।
सेवा और संचालन टीमें
संचालन और सहायता टीमें परवाह करती हैं कि उत्पादन में क्या और कब बदलता है। रिलीज़ घटनाएँ और फ़्लैग के बदलाव उन्हें दिखने चाहिए, आदर्श रूप से हर घटना पर रिलीज़ के पहचानकर्ता के साथ। चरणबद्ध रोलआउट और तेज़ स्विच-ऑफ़ उन घटनाओं की संख्या घटाते हैं जिन्हें पूर्ण बहाली चाहिए, और माप संचालन टीमों को वे नियंत्रण माँगने में मदद करते हैं जो उनका काम शांत बनाते हैं।
नेतृत्व और शासन
नेताओं को हर सेवा के लिए रुझान और फैलाव, और सरल प्रश्न का उत्तर माँगना चाहिए: पूरा हुआ परिवर्तन उपयोगकर्ताओं तक पहुँचने में कितना समय लेता है, और कितनी सुरक्षा से। टीमों के पार डिप्लॉयमेंट की आवृत्ति का लक्ष्य बँटवारे और दोबारा लेबल करने को न्योता देता है, इसलिए लीड टाइम के वितरण जैसे परिणामों और ज्ञात प्रतीक्षाओं को हटाने के लक्ष्यों को तरजीह दें। शासन कम-जोखिम वाले फ़्लैग किए परिवर्तनों को पूर्व-अधिकृत करके रिलीज़ अनुमोदनों का भार घटा सकता है, जब तक फ़्लैग का ऑडिट क्रम पूर्ण है (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)।
ग्राहक और उपयोगकर्ता
ग्राहक रिलीज़ देखते हैं, डिप्लॉयमेंट नहीं। वे परवाह करते हैं कि सुधार जल्दी आएँ, नया व्यवहार उन्हें चौंकाए नहीं, और ख़राब परिवर्तन जल्दी पलटा जा सके। जो टीम दोनों घटनाओं को अलग करती है वह ग्राहकों को फ़ीचर की जल्दी पहुँच दे सकती है, ऐसी तिथि घोषित कर सकती है जिसे वह निभा सके, और बाकी खोए बिना एक फ़ीचर रोलबैक कर सकती है। इन मापों को ग्राहक-मुखी मापों से जोड़ें (देखें विषय 5.3, उपलब्धता मीट्रिक्स, और विषय 6.1, ग्राहक संतुष्टि मीट्रिक्स)।
व्यवहार में: सेवा प्रबंधन का एक उदाहरण
एक क्षेत्रीय ऑनलाइन खुदरा विक्रेता उत्पाद खोज सेवा चलाता है जिसका स्वामी एक उत्पाद टीम है, और जिसे प्लैटफ़ॉर्म टीम तथा सर्विस डेस्क सहारा देते हैं। सेवा पाइपलाइन से उत्पादन में डिप्लॉय होती है और उसके पास फ़्लैग सेवा है जो छह महीने पहले शुरू हुई। नीचे की सभी संख्याएँ दृष्टांत के लिए हैं।
पिछली तिमाही में टीम ने 52 उत्पादन डिप्लॉयमेंट किए, प्रति सप्ताह लगभग चार। रिलीज़ की आवृत्ति, उन क्षणों के रूप में गिनी गई जब परिवर्तन सभी इच्छित उपयोगकर्ताओं की पहुँच में आया, उसी तिमाही में 11 थी, प्रति सप्ताह लगभग एक। मर्ज से रिलीज़ तक रिलीज़ का माध्य लीड टाइम 9 दिन था, 85वें परसेंटाइल के साथ 21 दिन। डिप्लॉयमेंट से रिलीज़ तक का माध्य अंतर 6 दिन था। रिलीज़ बैच का माध्य आकार 3 परिवर्तन था और 85वाँ परसेंटाइल 14। उपयोगकर्ता-दृश्य परिवर्तनों के लिए फ़्लैग कवरेज 58 प्रतिशत थी, और 17 रिलीज़ फ़्लैग पूर्ण रोलआउट के बाद 30 दिन से अधिक के थे।
गेमिंग का जोखिम पहले से दिखाई देता है। कुछ डिप्लॉयमेंट केवल-कॉन्फ़िगरेशन थे, और पाइपलाइन ने हर एक को डिप्लॉयमेंट गिना, इसलिए डैशबोर्ड अब अलग कॉन्फ़िगरेशन शृंखला दिखाता है और मासिक समीक्षा उपयोगकर्ता-दृश्य परिवर्तन के लिए 10 डिप्लॉयमेंटों का नमूना लेती है। एक क्षेत्रीय प्रबंधक डिप्लॉयमेंट की गिनती देखता है और टीम से दूसरी टीम के आँकड़े से मिलाने के लिए उसे बढ़ाने को कहता है। टीम लीड लक्ष्य का विरोध करती हैं और इसके बजाय मासिक समीक्षा में संख्याओं का पूरा सेट लाती हैं। समीक्षा पाती है कि अंतर इसलिए लंबा है कि रिलीज़ साप्ताहिक मार्केटिंग और सहायता ब्रीफ़िंग की प्रतीक्षा करती हैं, कि 17 बासी फ़्लैगों में से चार ऐसे कोड पथों की रक्षा करते हैं जिन्हें किसी ने परखा नहीं, और कि बैच के आकार का 85वाँ परसेंटाइल उन कुछ रिलीज़ों से आता है जिन्होंने छुट्टी की रोक से पहले असंबद्ध परिवर्तन बाँध दिए थे।
निर्णय लॉग में दर्ज निर्णय के चार भाग हैं। सहायता और मार्केटिंग छोटी, सप्ताह में दो बार की ब्रीफ़िंग में भाग लेंगे, ताकि रिलीज़ का निर्णय साप्ताहिक स्लॉट की प्रतीक्षा न करे। हर रिलीज़ फ़्लैग को स्वामी और हटाने की तिथि मिलती है, और चार अनपरखे बासी फ़्लैग अगले दो सप्ताहों में हटाए जाते हैं। असंबद्ध परिवर्तनों को बाँधने वाली रिलीज़ को रिलीज़ रिकॉर्ड में बताया कारण चाहिए। और टीम सामान्य डिप्लॉयमेंट लक्ष्य अस्वीकार करती है, इसके बजाय हर सेवा के रिलीज़ के लीड टाइम के वितरण और फ़्लैग की स्वच्छता का साझा दृश्य देती है। परिवर्तन प्रबंधक पाइपलाइन की जाँचें पास करने वाले फ़्लैग किए परिवर्तनों को मानक परिवर्तन मानने पर सहमत होता है, अगली तिमाही समीक्षा के साथ। अगली तिमाही में (दृष्टांत) रिलीज़ का माध्य लीड टाइम 5 दिन पर आता है, बासी फ़्लैग की गिनती 6 पर, और परिवर्तन विफलता दर स्थिर रहती है, इसलिए प्रयोग जारी रहता है।
एजाइल, AI, स्वचालन और विश्लेषण
एजाइल
डिप्लॉयमेंट को रिलीज़ से अलग करना टीम को छोटे परिवर्तन निरंतर भेजने और हितधारकों के तैयार होने पर रिलीज़ करने देता है। फ़्लैग की स्वच्छता की नियमित समीक्षा करें। सावधानी यह है कि डिप्लॉयमेंट गिनना परिवर्तनों को बाँटने को पुरस्कृत करता है।
AI
AI-सहायता वाली कोडिंग डिप्लॉयमेंट की गिनतियाँ और बैच का आकार बढ़ा सकती है। आवृत्ति को विफल डिप्लॉयमेंट की बहाली और बासी फ़्लैग की गिनती से जोड़ें, और डेटा में AI-सहायता वाले परिवर्तन चिह्नित करें। सावधानी यह है कि अधिक पुनर्कार्य के साथ अधिक डिप्लॉयमेंट प्रगति नहीं हैं।
स्वचालन
पाइपलाइन की घटनाओं से डिप्लॉयमेंट और रिलीज़ गिनें, और फ़्लैग की सफ़ाई के अनुस्मारक स्वचालित करें। पाइपलाइन को उसकी अपनी विफलता दर पर मापें। सावधानी यह है कि पाइपलाइन के बाहर की हाथ की रिलीज़ डेटा से गायब हो जाती हैं।
विश्लेषण
आवृत्ति को लीड टाइम और बैच के आकार, और डिप्लॉयमेंट तथा रिलीज़ के बीच के अंतर के साथ दिखाएँ। यह जिस निर्णय को सूचित करता है वह है कि उपयोगकर्ताओं तक का रास्ता कहाँ धीमा है। सावधानी यह है कि डिप्लॉयमेंट की परिभाषाएँ टीम के अनुसार भिन्न होती हैं।
क्षेत्र का नज़रिया
स्टार्टअप। स्टार्टअप के पास अक्सर एक सेवा और कोड में फ़्लैग लाइब्रेरी होती है, इसलिए डिप्लॉयमेंट और रिलीज़ सस्ते में अलग हो सकते हैं। समाप्ति तिथियों के साथ फ़्लैगों का सरल रजिस्टर रखें, और परसेंटाइल पर भरोसा करने से पहले पर्याप्त मात्रा की प्रतीक्षा करें।
छोटा व्यवसाय। छोटा व्यवसाय पैकेज्ड या खरीदा सॉफ़्टवेयर चला सकता है जहाँ आपूर्तिकर्ता रिलीज़ नियंत्रित करता है। उपयोगी माप हैं आपूर्तिकर्ता की रिलीज़ और व्यवसाय के उसे अपनाने के बीच का समय, और प्रमुख संस्करण में साथ आने वाले परिवर्तनों का बैच। आपूर्तिकर्ता की रिलीज़ की तिथियाँ और अपने डिप्लॉयमेंट की तिथियाँ दर्ज करें ताकि बीच की प्रतीक्षा दिखे।
उद्यम। उद्यम के सामने अलग रिलीज़ शैलियों की कई सेवाएँ, केंद्रीय परिवर्तन प्रक्रिया और साझा परिवेश होते हैं। मुख्य काम टीमों और आपूर्तिकर्ताओं में डिप्लॉयमेंट और रिलीज़ की परिभाषाओं पर सहमत होना, और ऐसा रोल-अप रखना है जो अंतरों का सम्मान करे। शासन के लिए फैलाव और रुझान का उपयोग करें और फ़्लैग प्लैटफ़ॉर्म को स्वामी वाली साझा सेवा मानें।
सरकार और सार्वजनिक क्षेत्र। रिलीज़ अक्सर निश्चित तिथियों, कानून, खरीद चक्रों या आश्वासन द्वारों से बँधी होती हैं, इसलिए रिलीज़ की आवृत्ति अच्छे कारणों से कम हो सकती है। डिप्लॉयमेंट की आवृत्ति और डिप्लॉयमेंट-से-रिलीज़ का अंतर फिर भी दिखा सकते हैं कि कितना जोखिम पहले लिया गया और कितना तिथि की प्रतीक्षा करता है। बाहरी द्वारों की प्रतीक्षा को टीम के अपने पाइपलाइन समय से अलग रिपोर्ट करें।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
इन मापों की प्रेरणा परिवर्तन पूरा होने और उसका मूल्य पहुँचाने के बीच का जोखिम और देरी घटाना है। शायद ही रिलीज़ होने वाले बड़े बैच प्रति घटना अधिक परिवर्तन ले जाते हैं, इसलिए विफलता का निदान और उसे पलटना कठिन है। डिप्लॉयमेंट को रिलीज़ से अलग करना टीम को तकनीकी जोखिम जल्दी और थोड़ी मात्रा में लेने, और उपयोगकर्ता का जोखिम सोच-समझकर लेने का तरीका देता है। माप दिखाते हैं कि अलगाव असली है या नहीं, और परिवर्तन कहाँ प्रतीक्षा कर रहा है।
लागत मध्यम है। डिप्लॉयमेंट और रिलीज़ की घटनाएँ जुटाने के लिए पाइपलाइन लॉग और फ़्लैग ऑडिट लॉग को संस्करण नियंत्रण और इश्यू ट्रैकर से जोड़ना होता है, जो एक बार का इंटीग्रेशन है और फिर कभी-कभार रख-रखाव (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)। फ़्लैग प्रथा की अपनी चालू लागतें हैं: प्लैटफ़ॉर्म या लाइब्रेरी, रजिस्टर, फ़्लैग किए परिवर्तन के दोनों पथ परखना, और समाप्त फ़्लैगों की सफ़ाई। मुख्य छिपी लागत फ़्लैग का ऋण है, जिसे बासी फ़्लैग की गिनती दिखाई देता रखती है।
प्रतिफल उस पैटर्न का अनुसरण करता है जिसे अधिकांश टीमें अपने डेटा में देख सकती हैं। छोटा रिलीज़ का लीड टाइम का अर्थ है इस पर तेज़ फीडबैक चक्र कि परिवर्तन उपयोगकर्ताओं की मदद करता है या नहीं। छोटे बैच का अर्थ है आसान निदान और आसान वापसी। डिप्लॉयमेंट-से-रिलीज़ का छोटा अंतर का अर्थ है कम समय जिसमें पूरा किया काम बिना उपयोग के पड़ा रहता है। मूल्य के लिए आँकड़ा न गढ़ें। टीम के अपने उदाहरणों का उपयोग करें, उन परिवर्तनों के जो हफ़्तों डार्क पड़े रहे, और अपने मापों के रुझान का।
प्रतिरूप-विरोधी और जाल
- हर टीम के लिए डिप्लॉयमेंट की आवृत्ति का लक्ष्य रखना। यह बँटवारे और दोबारा लेबल करने को न्योता देता है। लीड टाइम के संकरे वितरण जैसे परिणामों के लक्ष्य रखें, और आवृत्ति को पीछे आने दें।
- रिलीज़ ट्रेन को क्षमता का प्रमाण मानना। निश्चित कैलेंडर स्थिर गिनती देता है और प्रतीक्षा करते काम की आयु छिपाता है। सबसे पुराने मर्ज किए परिवर्तन की आयु ट्रैक करें जिस तक उपयोगकर्ता नहीं पहुँच सकते।
- कॉन्फ़िगरेशन परिवर्तनों को मुख्य शृंखला में डिप्लॉयमेंट गिनना। यह संख्या फुलाता है। अलग शृंखला रखें और उसे मुख्य के बगल में दिखाएँ।
- फ़्लैग कभी न हटाना। कोड में मृत शाखाएँ और अनपरखे संयोजन जमा होते हैं। हर रिलीज़ फ़्लैग को स्वामी और हटाने की तिथि दें, और हटाने को पूर्णता का हिस्सा मानें।
- बिना रिकॉर्ड के उत्पादन में फ़्लैग बदलना। फ़्लैग का बदलाव उत्पादन के व्यवहार का बदलाव है। उसे ऑडिट लॉग में भेजें और परिवर्तन सक्षमीकरण को दिखाई देता बनाएँ।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वयन |
|---|---|---|---|---|---|
| परिभाषाएँ और घड़ियाँ | "डिप्लॉयमेंट" और "रिलीज़" एक-दूसरे के स्थान पर इस्तेमाल; हर व्यक्ति अलग गिनता है | कुछ टीमें अपनी परिभाषाएँ लिखती हैं | मीट्रिक रजिस्टर में घड़ियों और अपवर्जनों सहित डिप्लॉयमेंट और रिलीज़ की एक लिखित परिभाषा | परिभाषा के बदलाव लॉग और चार्टों पर चिह्नित; हर तिमाही नमूने जाँचे जाते हैं | निर्णयों को सूचित करना बंद करने पर परिभाषाएँ आपूर्तिकर्ताओं और शासन के साथ संयुक्त रूप से संशोधित |
| डिप्लॉयमेंट और रिलीज़ का अलगाव | हर डिप्लॉयमेंट रिलीज़ है | कुछ टीमें जोखिम भरे परिवर्तनों के लिए फ़्लैग या चरणबद्ध रोलआउट उपयोग करती हैं | फ़्लैग और चरणबद्ध रोलआउट मानक विकल्प हैं, रिलीज़ घटनाएँ दर्ज | अंतर, बैच के आकार और रोलआउट के चरणों का रुझान देखा और समीक्षित | संबंधित सेवाओं के लिए टीमों और आपूर्तिकर्ताओं में रिलीज़ का समय समन्वित |
| डेटा संग्रह | टिकटों और चैट से हाथ से जोड़ी गिनतियाँ | कुछ सेवाओं का पाइपलाइन डेटा; रिलीज़ हाथ से दर्ज | अधिकांश सेवाओं के लिए डिप्लॉयमेंट, रिलीज़ और फ़्लैग के बदलाव अपने-आप जुटाए जाते हैं | डेटा की गुणवत्ता (कड़ी की दर, नमूनों का ऑडिट) मापी और ट्रैक की जाती है | सहमत इंटरफ़ेस से टीमों और आपूर्तिकर्ताओं में घटनाएँ साझा |
| फ़्लैग की स्वच्छता | कोई सूची नहीं | कुछ टीमों में अनौपचारिक सूची | हर रिलीज़ फ़्लैग के लिए स्वामी, प्रकार और समाप्ति तिथि सहित रजिस्टर | बासी फ़्लैग की गिनती का रुझान; हटाना पूर्णता का हिस्सा है और जाँचा जाता है | फ़्लैग प्लैटफ़ॉर्म स्वचालित समाप्ति अनुस्मारकों के साथ साझा सेवा के रूप में प्रबंधित |
| संख्याओं का उपयोग | ऊपर एकल गिनती के रूप में रिपोर्ट | टीमें कभी-कभार अपने चार्ट देखती हैं | विफलता और पुनर्कार्य के आँकड़ों के बगल में स्वामी टीम द्वारा मासिक समीक्षित | रुझान सुरक्षा-रेखा सहित वित्तपोषित सुधार को खिलाते हैं | फैलाव और रुझान संगठन भर में प्लैटफ़ॉर्म निवेश और परिवर्तन की नीति को सूचित करते हैं |
जाँच-सूची
- "डिप्लॉयमेंट" और "रिलीज़" हर एक की घड़ी की घटनाओं और अपवर्जनों के साथ लिखित रूप में परिभाषित हैं।
- उत्पादन के डिप्लॉयमेंट पाइपलाइन से अपने-आप जुटाए जाते हैं, परीक्षण परिवेश बाहर रखकर।
- रिलीज़ घटनाएँ फ़्लैग ऑडिट लॉग, रोलआउट के चरणों या रिलीज़ रिकॉर्डों से जुटाई जाती हैं।
- रिलीज़ का लीड टाइम बताए घड़ी के आरंभ का उपयोग करता है और माध्य तथा 85वाँ परसेंटाइल रिपोर्ट करता है।
- डिप्लॉयमेंट से रिलीज़ तक का अंतर और रिलीज़ बैच का आकार आवृत्ति के बगल में रिपोर्ट होते हैं।
- केवल-कॉन्फ़िगरेशन डिप्लॉयमेंट अलग शृंखला में दिखते हैं।
- हर रिलीज़ फ़्लैग का रजिस्टर में स्वामी, प्रकार और समाप्ति तिथि है।
- बासी फ़्लैग की हर महीने समीक्षा होती है और उनका हटाना पूर्णता का हिस्सा है।
- घटना और परिवर्तन के रिकॉर्डों पर रिलीज़ के पहचानकर्ता दिखते हैं।
- हर तिमाही परिभाषाओं के विरुद्ध डिप्लॉयमेंट और रिलीज़ के नमूने का ऑडिट होता है।
- सबसे लंबी प्रतीक्षा से जुड़ा एक सुधार-प्रयोग समीक्षा तिथि के साथ चल रहा है।
AI प्रॉम्प्ट
किसी सेवा के लिए डिप्लॉयमेंट और रिलीज़ की परिभाषाओं का मसौदा बनाएँ।
I am defining release and deployment metrics for [service name]. Our tools are
[version control host, CI/CD system, flag service, issue tracker, ITSM tool].
Our release style is [continuous, weekly train, monthly, store-reviewed, or
other]. For deployment frequency, release frequency, release lead time,
deployment-to-release gap, release batch size, feature flag coverage, and stale
flag count, draft a definition that states where the clock starts and stops,
what is counted and excluded, the data source, and one ambiguity to resolve. Do
not invent benchmark values or claim our practice matches any published
performance band. List your assumptions and the questions I should answer to
finish the definitions.
रिलीज़ के मापों के सेट में गेमिंग के जोखिम जाँचें।
Here is how we compute and report our release and deployment metrics:
[description of each metric, its data source, and how it is reported]. The
audience is [team, leadership, or governance body] and the targets, if any,
are [targets or none]. For each metric, list plausible ways the number could
be inflated, hidden, or distorted without real improvement, and suggest a paired
guardrail metric or practice that would catch it. Do not invent statistics. List
your assumptions and any information you would need to be more precise.
डिप्लॉयमेंट, रिलीज़ और फ़्लैगों के निर्यात का विश्लेषण करें।
I will paste a small export with these fields: [list fields, for example
deployment id, deployment time, result, change ids, flag name, flag on time,
exposure share, release time]. It covers [number] deployments and [number]
flags for [service name] between [start date] and [end date]. Compute the
median and 85th percentile of release lead time and of the deployment-to-release
gap, the batch size distribution, and the list of flags past [age limit] days
since full rollout, showing the counts behind each. Flag records with missing
links or suspicious timestamps. Do not extrapolate beyond the data or compare
the result with outside benchmarks. List your assumptions and the data quality
issues that limit the conclusions.
फ़्लैग की सफ़ाई और रिलीज़ की प्रतीक्षा के प्रयोग की योजना बनाएँ।
Our longest release wait is [description of the wait, with date range and
counts], and our flag register holds [number] release flags, of which [number]
are past their expiry date. Constraints are [constraints, for example regulated
releases, store review, shared test environment]. Propose three small
experiments of four to six weeks, each with a hypothesis, a way to observe the
effect, a guardrail metric, and a risk. Do not invent expected improvement
figures. List your assumptions and what we should check before starting.
AI स्किल
- Service Management Metrics skill: संबंधित परिवर्तन, रिलीज़ और घटना के विषय और हर रिलीज़ मीट्रिक के बगल में रहने वाली सुरक्षा-रेखा खोजने के लिए उपयोग करें।
- Service Management Metrics maintainer skill: यह जाँचने के लिए उपयोग करें कि इस विषय का संशोधित संस्करण अपनी घड़ियाँ, गेमिंग के रास्ते और अंतर-संदर्भ संगत रखता है।
मुख्य निष्कर्ष
- डिप्लॉयमेंट संस्करण को परिवेश में रखता है और रिलीज़ परिवर्तन को उपयोगकर्ताओं की पहुँच में लाती है। जहाँ आप कर सकें, दोनों को अलग मापें।
- रिलीज़ का लीड टाइम बताए आरंभ के साथ रिलीज़ पर समाप्त होना चाहिए, और माध्य तथा 85वें परसेंटाइल के रूप में रिपोर्ट होना चाहिए।
- डिप्लॉयमेंट से रिलीज़ तक का अंतर और बैच का आकार दिखाते हैं कि अलगाव असली है या नहीं, और वे आवृत्ति को बँटवारे और दोबारा लेबल करने से बचाते हैं।
- फ़ीचर फ़्लैग अलगाव को संभव बनाते हैं और लागत वहन करते हैं, इसलिए स्वामियों और समाप्ति तिथियों के साथ कवरेज और बासी फ़्लैग ट्रैक करें।
- लिखित नियमों से गिनें, रिलीज़ को घटनाओं और परिवर्तनों से जोड़ें, और सेवा की तुलना अन्य टीमों से नहीं, उसके अपने इतिहास से करें।
संदर्भ और आगे का अध्ययन
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Humble, J., and Farley, D., Continuous Delivery: Reliable Software Releases through Build, Test, and Deployment Automation, Addison-Wesley, 2010.
- DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
- Hodgson, P., "Feature Toggles (aka Feature Flags)," martinfowler.com, 2017, https://martinfowler.com/articles/feature-toggles.html
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, Software deployment.
- Wikipedia, Release management.
- Wikipedia, Feature toggle.
- Wikipedia, Canary release.
- Wikipedia, Blue-green deployment.
- Wikipedia, Continuous delivery.
- Wikipedia, Goodhart's law.