पाइपलाइन और स्वचालित परिवर्तन मीट्रिक्स
डिलीवरी पाइपलाइन एक साथ वह रास्ता है जिससे बदलाव उपयोगकर्ताओं तक पहुँचते हैं और इस प्रमाण का स्रोत कि वे सुरक्षित हैं, इसलिए उसकी गति, विश्वसनीयता, परिवर्तन के अनुमोदन का कितना भाग वह संभालती है, और क्या उसका बनाया प्रमाण ऑडिटर को आश्वस्त करेगा, यह मापें, और इन सबको प्रणाली के माप के रूप में पढ़ें, उन लोगों के कभी नहीं जो उसे उपयोग करते हैं।
अवलोकन और प्रेरणा
निरंतर इंटीग्रेशन (continuous integration) और निरंतर डिलीवरी (continuous delivery) की पाइपलाइन बदलाव को डेवलपर के काम से चालू सेवा तक स्वचालित बिल्ड, परीक्षण, सुरक्षा की जाँचों और डिप्लॉयमेंट के रास्ते ले जाती है। जब पाइपलाइन पर भरोसा हो, तो वह नियमित बदलावों के वे निर्णय भी ले सकती है जो कभी परिवर्तन सलाहकार बोर्ड लेता था। ITIL परिवर्तन के प्रबंधन की प्रैक्टिस को "परिवर्तन सक्षमीकरण" कहता है, और उसका उद्देश्य लाभदायक बदलावों को सुरक्षित और जल्दी होने देना है। जो पाइपलाइन जाँचें चलाती है, प्रमाण दर्ज करती है, और कम जोखिम के बदलाव अपने-आप अनुमोदित करती है, वह उस उद्देश्य को पूरा करने का एक तरीका है।
इसलिए पाइपलाइन एक साथ दो चीज़ें है। वह उत्पादन की प्रणाली है, अपनी उपलब्धता, गति और विफलताओं के साथ, और वह नियंत्रण है, इस प्रमाण के साथ कि क्या परखा गया, किसने समीक्षा की, और क्या अनुमोदित हुआ। दोनों को मापना चाहिए। जाँचें छोड़ने वाली तेज़ पाइपलाइन जोखिम है। धीमी, अस्थिर पाइपलाइन लोगों को उसे टालने की ओर धकेलती है, और टाले गए बदलाव हर उस नियंत्रण से बच निकलते हैं जो पाइपलाइन देने के लिए थी।
यह विषय भाग 4 के परिवर्तन के मापों (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स, और विषय 4.4, परिवर्तन की विफलता और पुनर्कार्य) और रिलीज़ के मापों (देखें विषय 4.5, रिलीज़ और डिप्लॉयमेंट मीट्रिक्स) का पूरक है, पाइपलाइन पर प्रणाली के रूप में ध्यान देकर। यह DORA के मापों (देखें विषय 2.8, DORA मीट्रिक्स) का पूरक है, यह देखकर कि पाइपलाइन के भीतर क्या होता है। यह विषय 10.6 के सामान्य स्वचालन के मापों से भी संबंधित है (देखें विषय 10.6, स्वचालन और ऑर्केस्ट्रेशन मीट्रिक्स)।
यहाँ उपयोग हुए शब्द। पाइपलाइन रन एक बदलाव के लिए पाइपलाइन का एक निष्पादन है। चरण पाइपलाइन का एक कदम है, जैसे बिल्ड या परीक्षण। अस्थिर परीक्षण वह परीक्षण है जो उसी कोड पर कभी पास और कभी विफल होता है। बाईपास वह बदलाव है जो पाइपलाइन से गुज़रे बिना उत्पादन में पहुँचता है, उदाहरण के लिए आपातकालीन हाथ के डिप्लॉयमेंट से। कोड के रूप में नीति का अर्थ है नियम, जैसे "सुरक्षा स्कैन पास हुए बिना डिप्लॉयमेंट नहीं", सॉफ़्टवेयर के रूप में लिखना जिसे पाइपलाइन लागू करे। प्रमाण इसका दर्ज सबूत है कि बदलाव किससे गुज़रा। ITIL में मानक परिवर्तन कम जोखिम, भली-भाँति समझा हुआ, पूर्व-अनुमोदित प्रकार का परिवर्तन है।
मुख्य सिद्धांत
- पाइपलाइन एक सेवा है। उसकी विश्वसनीयता, गति और विफलताएँ वैसे ही मापें जैसे किसी उत्पादन प्रणाली की, और उसे स्वामी दें।
- बाईपास मापें। जो बदलाव पाइपलाइन से बचते हैं उनकी संख्या दिखाती है कि पाइपलाइन पर कितना भरोसा किया जा सकता है।
- अनुमोदन को जोखिम और प्रमाण से स्वचालित करें। जो भली-भाँति समझा है उसे पूर्व-अनुमोदित करें, और जो नहीं उसके लिए मानवीय समीक्षा रखें।
- प्रमाण एक उत्पाद है। पाइपलाइन जो दर्ज करे वह बिना भागदौड़ के ऑडिटर के प्रश्नों का उत्तर दे।
- तेज़ और सुरक्षित को साथ मापा जाता है। गति के माप विफलता और पुनर्कार्य से जुड़े हैं।
- प्रणालियों का वर्णन करें, लोगों का नहीं। किसने बदलाव पुश किया इसका पाइपलाइन का डेटा प्रदर्शन की रैंकिंग नहीं है।
मीट्रिक परिभाषाएँ
| मीट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL प्रैक्टिस | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| पाइपलाइन की सफलता की दर | पाइपलाइन के रनों का हिस्सा जो पाइपलाइन या उसके परिवेश से हुई विफलता के बिना पूरे होते हैं | रन जो पास होते हैं या केवल असली कोड के दोष पर विफल होते हैं / शुरू हुए रन; उपयोगकर्ता द्वारा रद्द रन बाहर रखे और रिपोर्ट होते हैं | प्रतिशत | पाइपलाइन प्लेटफ़ॉर्म के लॉग | रिलीज़ प्रबंधन; परिवर्तन सक्षमीकरण | निरंतर इंटीग्रेशन की सेहत | साप्ताहिक |
| पाइपलाइन की अवधि | बदलाव को पाइपलाइन से गुज़रने में लगा समय | डिप्लॉयमेंट तक पहुँचने वाले रनों के लिए (अंतिम चरण पूरा होने का समय घटा रन शुरू होने का समय) की माध्यिका और 85वाँ परसेंटाइल | मिनट | पाइपलाइन प्लेटफ़ॉर्म के लॉग | रिलीज़ प्रबंधन | छोटे फीडबैक के चक्र | साप्ताहिक |
| अस्थिर परीक्षण की दर | परीक्षण की विफलताओं का हिस्सा जो कोड बदले बिना दोबारा चलाने पर पास हो जाती हैं | दोबारा चलाने पर पास होने वाली विफलताएँ / परीक्षण की विफलताएँ | प्रतिशत | परीक्षण के परिणाम और दोबारा चलाने के लॉग | रिलीज़ प्रबंधन | पूर्णता की परिभाषा; परीक्षण की प्रथा | मासिक |
| स्वचालित अनुमोदन का हिस्सा | बदलावों का हिस्सा जो मानवीय अनुमोदन के चरण के बिना पाइपलाइन की नीति से अनुमोदित हुए | केवल नीति से अनुमोदित बदलाव / डिप्लॉय किए बदलाव | प्रतिशत | पाइपलाइन और परिवर्तन के रिकॉर्ड | परिवर्तन सक्षमीकरण | स्वचालित जाँचों के साथ ट्रंक-आधारित विकास | मासिक |
| बाईपास की दर | उत्पादन के बदलावों का हिस्सा जो पाइपलाइन से नहीं गुज़रे | पाइपलाइन के बाहर किए उत्पादन के बदलाव, डिप्लॉयमेंट के रिकॉर्ड की पाइपलाइन के रिकॉर्ड से तुलना करके मिले / सभी उत्पादन के बदलाव | प्रतिशत | डिप्लॉयमेंट के रिकॉर्ड, कॉन्फ़िगरेशन का ऑडिट, और पाइपलाइन के लॉग | परिवर्तन सक्षमीकरण; कॉन्फ़िगरेशन प्रबंधन | कार्य के समझौते | मासिक |
| प्रमाण की पूर्णता | पाइपलाइन से डिप्लॉय बदलावों का हिस्सा जिनका रिकॉर्ड आवश्यक प्रमाण दिखाता है | सभी आवश्यक प्रमाण मदों (परीक्षण, समीक्षा, स्कैन, अनुमोदन) से जुड़े बदलाव / डिप्लॉय किए बदलाव | प्रतिशत | पाइपलाइन और परिवर्तन के रिकॉर्ड | परिवर्तन सक्षमीकरण; शासन | पूर्णता की परिभाषा | मासिक |
| नीति के द्वार की विफलता की दर | नीति की जाँच से रोके रनों का हिस्सा, असली उल्लंघन और नीति की त्रुटि में बँटा | नीति के द्वार से रोके रन / शुरू हुए रन; कारण नमूने से वर्गीकृत | प्रतिशत | पाइपलाइन के लॉग और द्वार के रिकॉर्ड | परिवर्तन सक्षमीकरण; जोखिम प्रबंधन | स्वीकृति के मानदंड | मासिक |
पाइपलाइन की सफलता की दर व्यक्ति द्वारा रद्द रनों को बाहर रखती है, जो अलग रिपोर्ट होते हैं, और अस्थिर परीक्षण या परिवेश की गड़बड़ी से हुई विफलता को पाइपलाइन की विफलता गिनती है। बाईपास की दर को उत्पादन में जो चल रहा है उसका स्वतंत्र रिकॉर्ड चाहिए, इसलिए उसकी गणना अकेली पाइपलाइन से नहीं हो सकती।
सिफ़ारिशें
पाइपलाइन को सेवा मानें
1. पाइपलाइन को स्वामी और उद्देश्य दें। नामित टीम पाइपलाइन की विश्वसनीयता और गति की स्वामी है, सेवा स्तर के उद्देश्यों के साथ, जैसे बताए समय में पूरे होने वाले रनों का हिस्सा। स्वामी के बिना अस्थिरता तब तक बढ़ती है जब तक लोग भरोसा करना बंद नहीं कर देते।
2. अवधि को वितरण के रूप में मापें। माध्यिका वे धीमे रन छिपाती है जिनकी लोग प्रतीक्षा करते हैं। माध्यिका और 85वाँ परसेंटाइल दिखाएँ, और अवधि को चरणों में बाँटें ताकि सबसे लंबी प्रतीक्षा मिले, जो अक्सर साझा रनर की कतार या हाथ का अनुमोदन होती है।
3. अस्थिर परीक्षण ट्रैक करें और ठीक करें। अस्थिर परीक्षण लोगों को हरा होने तक दोबारा चलाना सिखाता है। अस्थिर विफलताएँ गिनें, हर एक को स्वामी सौंपें, और उसे तिथि के साथ ठीक या क्वारंटीन करें। जिस पाइपलाइन को लोग आदत से दोबारा चलाते हैं वह प्रमाण नहीं बना रही।
अनुमोदन सावधानी से स्वचालित करें
4. बदलावों को जोखिम से वर्गीकृत करें। परिवर्तन के स्वामियों से सहमत हों कि किस प्रकार के बदलाव मानक हैं और नीति से अनुमोदित हो सकते हैं, और किन्हें व्यक्ति चाहिए। विफलता के डेटा से वर्गीकरण की नियमित समीक्षा करें (देखें विषय 4.4, परिवर्तन की विफलता और पुनर्कार्य)।
5. नीति को कोड के रूप में लिखें और परखें। पाइपलाइन जो नियम लागू करती है वे कोड हैं, और किसी भी कोड की तरह उन्हें परीक्षण और स्वामी चाहिए। दर्ज करें कि हर रन पर नीति का कौन-सा संस्करण लागू हुआ।
6. असामान्य के लिए मानवीय रास्ता रखें। आपातकालीन और उच्च जोखिम के बदलावों को ऐसा व्यक्ति चाहिए जो प्रमाण के साथ निर्णय ले सके। परखें कि रास्ता काम करता है और मापें कि उसमें कितना समय लगता है।
उपयोगी प्रमाण बनाएँ
7. तय करें कि आपको कौन-सा प्रमाण चाहिए। ऑडिटर या घटना की समीक्षा करने वाले के प्रश्नों से पीछे की ओर काम करें: क्या परखा गया, किसने समीक्षा की, क्या स्कैन हुआ, किसने अनुमोदित किया, और क्या डिप्लॉय हुआ। पाइपलाइन से ठीक वही दर्ज करवाएँ और उसे बदलाव से जोड़ें।
8. पूर्णता नमूने से मापें। पाइपलाइन की अपनी गिनती से प्रमाण की पूर्णता ऊँची हो सकती है जबकि सामग्री खाली हो। रिकॉर्ड के नमूने की जाँच करें कि प्रमाण असली है और जो चला उससे मेल खाता है।
9. प्रमाण को छेड़छाड़-प्रकट रखें। पाइपलाइन के रिकॉर्ड ऐसी जगह रखें जहाँ डिप्लॉय करने वाले लोग उन्हें संपादित न कर सकें, और उन्हें उतने समय रखें जितना आपके नियम माँगते हैं। प्रतिधारण की आवश्यकताएँ अपने कानूनी सलाहकार से जाँचें।
बाईपास और भटकाव पर नज़र रखें
10. उत्पादन की पाइपलाइन से तुलना करें। उत्पादन में जो चल रहा है उसका मिलान पाइपलाइन के डिप्लॉय किए से करें। अंतर बाईपास या भटकाव हैं, और हर एक एक संक्षिप्त, दोष-रहित नज़र का हकदार है कि पाइपलाइन से क्यों बचा गया।
11. पाइपलाइन को सबसे आसान रास्ता बनाएँ। लोग धीमी और अस्थिर पाइपलाइनों को टालते हैं। यदि बाईपास बढ़े, तो पहले गति और विश्वसनीयता देखें, और आपातकालीन ज़रूरतें जिन्हें पाइपलाइन पूरा नहीं करती।
12. द्वारों की मूल्य के लिए समीक्षा करें। जो द्वार कभी असली दोष नहीं रोकता और हर रन को देर करता है वह हटाने या फिर से डिज़ाइन का उम्मीदवार है। जो द्वार नीति की त्रुटियों के कारण कई रन रोकता है उसे नीति में सुधार चाहिए।
गेमिंग के रास्ते और सुरक्षा-रेखाएँ
| मीट्रिक | इसमें गेमिंग कैसे होती है | जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा |
|---|---|---|
| पाइपलाइन की सफलता की दर | अवसंरचना की विफलताओं को रद्द के रूप में पुनर्वर्गीकृत करना; हरा होने तक दोबारा चलाना और केवल अंतिम रन गिनना | सभी प्रयास गिनें; प्रति बदलाव दोबारा चलाना रिपोर्ट करें |
| पाइपलाइन की अवधि | धीमे चरण मापी खिड़की के बाहर खिसकाना; चरण छोड़ना | कमिट से डिप्लॉय तक आरंभ से अंत तक मापें; चले चरणों की आवश्यक चरणों से तुलना करें |
| अस्थिर परीक्षण की दर | अस्थिर परीक्षण हटाना या मौन करना; विफलताओं को ज्ञात चिह्नित करना | परीक्षणों की संख्या और कवरेज का रुझान; क्वारंटीन परीक्षणों की तिथि के साथ समीक्षा |
| स्वचालित अनुमोदन का हिस्सा | "मानक" श्रेणी को जोखिम भरे बदलाव शामिल करने तक चौड़ा करना | स्वचालित रूप से अनुमोदित बदलावों की परिवर्तन विफलता की दर; अनुमोदित बदलावों का नमूना |
| बाईपास की दर | आपातकालीन हाथ के डिप्लॉय को पाइपलाइन के रन के रूप में दर्ज करना; उत्पादन से मिलान न करना | उत्पादन की स्थिति का पाइपलाइन के रिकॉर्ड से मिलान; डिप्लॉयमेंट का नमूना |
| प्रमाण की पूर्णता | खाली या अप्रासंगिक प्रमाण जोड़ना; सामान्य रिपोर्ट से जोड़ना | प्रमाण की सामग्री का नमूना; जाँचें कि वह बदलाव से मेल खाता है |
| नीति के द्वार की विफलता की दर | विफलताएँ घटाने के लिए नीतियाँ ढीली करना; असली उल्लंघन को नीति की त्रुटि वर्गीकृत करना | रोके रनों का नमूना; निकले दोषों की दर और ऑडिट के निष्कर्ष |
स्वस्थ पठन ऐसी पाइपलाइन है जो इतनी तेज़ और स्थिर है कि लोग उसे हर चीज़ के लिए उपयोग करते हैं, बाईपास की दर शून्य के निकट जहाँ हर अपवाद समझा गया है, स्वचालित अनुमोदनों का बढ़ता हिस्सा स्थिर परिवर्तन विफलता की दर के साथ, और प्रमाण जो नमूने पर टिकता है।
समझौते: लाभ और हानि
| तरीका | ताकत | कमज़ोरी |
|---|---|---|
| भारी पाइपलाइन जाँचें | दोष जल्दी पकड़ती हैं; मज़बूत प्रमाण | धीमे रन; अधिक अस्थिरता; बाईपास का दबाव |
| हल्की पाइपलाइन | तेज़ फीडबैक | कमज़ोर प्रमाण; अधिक दोष उत्पादन में पहुँचते हैं |
| मानक बदलावों के लिए स्वचालित अनुमोदन | प्रतीक्षा हटाता है; एकसमान निर्णय | श्रेणी चौड़ी होने का जोखिम; नीति की त्रुटियाँ बढ़ती हैं |
| सभी बदलावों के लिए मानवीय अनुमोदन | परिचित; दिखाई देती जवाबदेही | प्रतीक्षा; अनुमोदन औपचारिकता बन सकते हैं |
सीधा निष्कर्ष है कि पाइपलाइन को तेज़ और भरोसेमंद रखें, केवल वही नीति से अनुमोदित करें जो भली-भाँति समझा है, और बाईपास मापें। जिन भारी जाँचों से लोग बचते हैं वे कुछ सुरक्षित नहीं करतीं।
अपनी टीम के साथ चर्चा के प्रश्न
1. हमारे उत्पादन के कितने बदलाव पाइपलाइन से गुज़रते हैं, और हमें कैसे पता? उत्पादन की स्थिति की पाइपलाइन के रिकॉर्ड से तुलना का तरीका माँगें। टीमें अक्सर आपातकालीन सुधार, कॉन्फ़िगरेशन के बदलाव और डेटा के बदलाव पाती हैं जो पाइपलाइन के चारों ओर से जाते हैं। रक्षात्मक उत्तरों की अपेक्षा रखें, इसलिए हर बाईपास को जानकारी मानें। अनुवर्ती में पूछें कि पाइपलाइन को आसान रास्ता क्या बनाता।
2. हमारे कौन-से परीक्षण हम पास होने तक दोबारा चलाते हैं, और उनका स्वामी कौन है? दोबारा चलाने की आदतें दिखाती हैं कि भरोसा कहाँ घटा है। सूची बनाएँ और स्वामी सौंपें। चर्चा करें कि हर एक ठीक करें या हटाएँ। बातचीत अक्सर दिखाती है कि थोड़े परीक्षण अधिकांश शोर करते हैं।
3. आज हम कौन-से बदलाव अपने-आप अनुमोदित करते हैं, और कौन-से करने चाहिए? बदलावों के प्रकार और हर एक का विफलता का इतिहास सूचीबद्ध करें। तय करें किनमें कम जोखिम और अच्छे परीक्षण हैं। पूछें कि किस बात पर आप किसी प्रकार का स्वचालित अनुमोदन रोक देंगे। अनुवर्ती में वर्गीकरण की समीक्षा की तिथि पर सहमत हों।
4. यदि ऑडिटर पिछले मंगलवार के डिप्लॉयमेंट के बारे में पूछे, तो हम क्या दिखा सकेंगे? एक असली बदलाव पर चलें और उसका प्रमाण निकालें। अंतर और हाथ के चरण नोट करें। पूछें कि प्रमाण उसी समय दर्ज हुआ या बाद में पुनर्निर्मित हुआ। अनुवर्ती में एक अंतर बंद करना चुनें।
5. हमारी पाइपलाइन अपना समय कहाँ बिताती है, और कौन प्रतीक्षा करता है? चरणों का विभाजन देखें। सबसे लंबी प्रतीक्षा अक्सर कतार या हाथ का अनुमोदन होती है। पूछें कि क्या प्रतीक्षा करने वाले लोग कुछ और कर सकते हैं, और देरी से मिले फीडबैक में प्रतीक्षा की लागत क्या है। हटाने के लिए एक देरी चुनें।
6. किस द्वार ने कभी कुछ उपयोगी नहीं रोका? पिछली तिमाही के द्वार के रोकने के कारण देखें। जिस द्वार में केवल नीति की त्रुटियाँ हैं उसे ठीक करना चाहिए, और जो द्वार कभी कुछ नहीं रोकता वह फ़ालतू हो सकता है। पूछें कि क्या उसे हटाने से जोखिम बढ़ेगा। परीक्षण पर सहमत हों।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
आप हर दिन पाइपलाइन पर निर्भर हैं। परीक्षणों को विश्वसनीय रखें, बदलाव छोटे रखें, और अस्थिर परीक्षण को उत्पाद का दोष मानें। अपनी देरियाँ खोजने के लिए पाइपलाइन का डेटा उपयोग करें, और उसे व्यक्तिगत प्रदर्शन की बातचीतों से दूर रखें।
सेवा और संचालन टीमें
पाइपलाइन जो रिलीज़ करती है वह आपको विरासत में मिलता है। घटना के लिए आपको जो प्रमाण चाहिए, जैसे क्या बदला और कब, और तेज़ रोलबैक माँगें। बाईपास और भटकाव ट्रैक करें, और उन्हें टीम के पास इस बातचीत के रूप में लाएँ कि क्यों।
नेतृत्व और शासन
पाइपलाइन को उत्पादन की सेवा के रूप में वित्त दें, स्वामी, क्षमता और अस्थिरता ठीक करने के समय के साथ। बाईपास की दर, नमूने से प्रमाण की पूर्णता, और स्वचालित अनुमोदनों की परिवर्तन विफलता की दर माँगें। डिप्लॉयमेंट गिनने को सफलता का माप बनाने के दबाव का विरोध करें।
ग्राहक और उपयोगकर्ता
आपको लाभ होता है जब बदलाव अक्सर और सुरक्षित रूप से आते हैं, और आप पीड़ित होते हैं जब बदलाव कुछ तोड़ता है। पूछें कि बदलाव कैसे परखे जाते हैं और ख़राब बदलाव कितनी जल्दी पलटा जाता है। रिलीज़ के बाद समस्याओं की आपकी रिपोर्टें उस फीडबैक का भाग हैं जो पाइपलाइन नहीं दे सकती।
व्यवहार में: सेवा प्रबंधन का एक उदाहरण
एक क्षेत्रीय अस्पताल का IT विभाग अपने नैदानिक शेड्यूलिंग के एप्लिकेशन के लिए पाइपलाइन चलाता है। इस उदाहरण की संख्याएँ दृष्टांत के लिए हैं। परिवर्तन सलाहकार बोर्ड साप्ताहिक बैठता है, और नियमित बदलाव अनुमोदन के लिए औसतन चार दिन प्रतीक्षा करते हैं। टीम मानक बदलावों को पाइपलाइन से अनुमोदित करने का प्रस्ताव रखती है।
शुरू करने से पहले वे मापते हैं। पाइपलाइन की सफलता की दर 82 प्रतिशत है, और विफलताओं का नमूना दिखाता है कि लगभग एक-तिहाई अस्थिर परीक्षण हैं। 85वें परसेंटाइल पर अवधि 47 मिनट है, जिसमें साझा बिल्ड रनर की 20 मिनट की कतार है। डिप्लॉयमेंट के रिकॉर्ड की पाइपलाइन के रिकॉर्ड से तुलना दिखाती है कि उत्पादन के लगभग 12 प्रतिशत बदलावों ने पाइपलाइन को बाईपास किया, अधिकतर कॉन्फ़िगरेशन के संपादन और तत्काल सुधार।
टीम सबसे अस्थिर पाँच परीक्षण ठीक करती है, बिल्ड रनर जोड़ती है, और पाइपलाइन से कॉन्फ़िगरेशन के बदलाव का रास्ता बनाती है। तीन महीने बाद बाईपास 3 प्रतिशत तक गिरता है। फिर वे शेड्यूलिंग के एप्लिकेशन के छोटे, परखे, पलटने योग्य बदलावों की मानक परिवर्तन की श्रेणी परिभाषित करते हैं, परीक्षणों, सुरक्षा स्कैन और सहकर्मी समीक्षा की नीति की जाँचों के साथ। स्वचालित अनुमोदन का हिस्सा लगभग 40 प्रतिशत तक पहुँचता है, और उन बदलावों के लिए अनुमोदन का प्रतीक्षा समय दिनों से मिनटों तक गिरता है।
गेमिंग का जोखिम उभरता है। एक प्रबंधक मानक श्रेणी में डेटाबेस स्कीमा के बदलाव जोड़कर स्वचालित अनुमोदन का हिस्सा बढ़ाने को कहते हैं। टीम स्कीमा के बदलावों की परिवर्तन विफलता की दर जाँचती है, जो अन्य बदलावों से अधिक है, और उन्हें मानवीय समीक्षक के साथ रखती है। पाइपलाइन की अपनी गिनती से प्रमाण की पूर्णता 98 प्रतिशत है, पर 20 रिकॉर्ड का नमूना दिखाता है कि चार में दूसरे बिल्ड की परीक्षण रिपोर्ट जुड़ी थी। टीम जोड़ने का नियम ठीक करती है। जो कठिन रहता है: आपातकालीन सुधारों के बाईपास को अब भी घटना के बाद का रिकॉर्ड चाहिए, और रोगी की सुरक्षा को प्रभावित करने वाले बदलावों की नैदानिक जोखिम की समीक्षा लोगों के पास रहती है।
एजाइल, AI, स्वचालन और विश्लेषण
एजाइल
भरोसेमंद पाइपलाइन से छोटे, बार-बार के बदलाव निरंतर डिलीवरी का मूल हैं, और पाइपलाइन का अपना बैकलॉग हितधारकों के साथ उत्पाद जैसी ही नियमित समीक्षा का हकदार है। अच्छी प्रथा है नियमित सुधार की बातचीत में अस्थिर परीक्षणों और बाईपास की समीक्षा। सावधानी यह है कि अकेली डिप्लॉयमेंट की आवृत्ति का जश्न बदलाव बाँटने को पुरस्कृत करता है।
AI
AI पाइपलाइन के भीतर कोड और परीक्षण लिख सकता है, बदलावों की समीक्षा कर सकता है, और परिवर्तन के जोखिम का आकलन कर सकता है। डेटा में AI-सहायता प्राप्त बदलाव चिह्नित करें और उनकी विफलता और पुनर्कार्य की अन्य बदलावों से तुलना करें (देखें विषय 10.2, AI-सहायता प्राप्त कार्य को मापना)। यदि AI का द्वार निर्णय या सिफ़ारिश करे, तो उसके ग़लत अनुमोदन और ग़लत रोक नमूने से मापें, और उच्च जोखिम के बदलावों के लिए व्यक्ति को जवाबदेह रखें। सावधानी यह है कि AI के बनाए परीक्षण उस व्यवहार को परखे बिना कवरेज की संख्या बढ़ा सकते हैं जो मायने रखता है।
स्वचालन
पाइपलाइन ही स्वचालन है, इसलिए प्रथा है उसे उत्पादन की सेवा की तरह मानना, लॉग, स्वामी और आपात स्थितियों के लिए हाथ के विकल्प के साथ। प्रमाण जुटाना और उत्पादन का पाइपलाइन के रिकॉर्ड से मिलान स्वचालित करें। सावधानी यह है कि स्वचालित अनुमोदन नीति की त्रुटि का प्रभाव कई गुना कर देते हैं, इसलिए नीतियाँ परखें और रोकने का नियंत्रण रखें।
विश्लेषण
पाइपलाइन की घटनाएँ यह दिखाने के लिए उपयोग करें कि समय कहाँ जाता है और विफलताएँ कहाँ गुच्छित होती हैं, और रनों को घटनाओं और पुनर्कार्य से जोड़ें। यह जिस निर्णय को सूचित करता है वह है गति, विश्वसनीयता, या परीक्षणों में निवेश कहाँ करना है। सावधानी यह है कि पाइपलाइन का डेटा परीक्षणों की गुणवत्ता नहीं दिखाता, इसलिए उसे निकले दोषों से जोड़ें, और हर दर के पीछे रनों की संख्या दिखाएँ (देखें विषय 10.8, विश्लेषण और डेटा गुणवत्ता मीट्रिक्स)।
क्षेत्र का नज़रिया
स्टार्टअप। तेज़ परीक्षणों और उत्पादन में स्वचालित डिप्लॉय वाली सरल पाइपलाइन पर्याप्त हो सकती है। अवधि और बाईपास मापें, और परीक्षणों तथा समीक्षा का प्रमाण रिपॉज़िटरी में दर्ज करें।
छोटा व्यवसाय। पाइपलाइन होस्ट की सेवा या आपूर्तिकर्ता की हो सकती है। पूछें कि वह क्या और कहाँ दर्ज करती है, और जो डिप्लॉय हुआ उसे पुनर्निर्मित करने का तरीका रखें। ऐसे नियंत्रण बनाने से बचें जिन्हें आप बनाए नहीं रखेंगे।
उद्यम। टीमों में कई पाइपलाइनों को साझा प्रमाण के प्रारूप और साझा नीति चाहिए। बाईपास और प्रमाण की पूर्णता का केंद्रीय दृश्य रखें, सुधारों का स्वामित्व टीमों के स्तर पर। जहाँ टीमों की ज़रूरतें भिन्न हैं वहाँ एक औज़ार थोपने से बचें।
सरकार और सार्वजनिक क्षेत्र। कर्तव्यों का पृथक्करण, ऑडिट ट्रेल और प्रतिधारण के नियम पाइपलाइन को आकार देते हैं। प्रमाण ऑडिट के लिए डिज़ाइन करें, और कानूनी तथा खरीद की आवश्यकताएँ जाँचें, स्वचालित निर्णयों के लिए भी (देखें विषय 8.3, अनुपालन और ऑडिट मीट्रिक्स, और विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
लागतें हैं पाइपलाइन का प्लेटफ़ॉर्म और रनर, परीक्षण और नीति लिखने तथा बनाए रखने का काम, अस्थिरता ठीक करने का समय, और प्रमाण संग्रहित करने की लागत। जब पाइपलाइन और परिवर्तन के रिकॉर्ड जुड़े हों तो माप स्वयं कम लागत के हैं।
प्रतिफल हैं अनुमोदन की कम प्रतीक्षा, कम हाथ के चरण, दोषों की जल्दी पहचान, और प्रमाण जो ज़रूरत पर तैयार है। ये तेज़ डिलीवरी और ऑडिट के समय कम प्रयास के रूप में दिखते हैं, पर इन्हें बढ़ा-चढ़ाकर बताना आसान है। अपने आधार मापें, जैसे अनुमोदन का प्रतीक्षा समय और ऑडिट का प्रमाण जुटाने का प्रयास, पहले और बाद में, और अनुमान सीमाओं के रूप में बताएँ (देखें विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य)। जोखिम की ओर उन विफलताओं की लागत है जो पाइपलाइन से निकल जाती हैं और पाइपलाइन के आउटेज की जो सारे बदलाव रोक देता है।
प्रतिरूप-विरोधी और जाल
- डिप्लॉयमेंट गिनना सफलता मानना। यह बदलाव बाँटने को पुरस्कृत करता है। विफलता और पुनर्कार्य से जोड़ें।
- हरा होने तक दोबारा चलाना। यह अस्थिर परीक्षण और कमज़ोर प्रमाण छिपाता है। अस्थिरता गिनें और ठीक करें।
- बाईपास को अनदेखा करना। जो बदलाव पाइपलाइन से बचते हैं उन्हीं की वह रक्षा नहीं कर सकती। उत्पादन का मिलान पाइपलाइन के रिकॉर्ड से करें।
- स्वचालन बढ़ाने के लिए मानक श्रेणी चौड़ी करना। हिस्सा बढ़ता है और विफलता की दर उसके पीछे चलती है। विफलता के डेटा से श्रेणी की समीक्षा करें।
- प्रमाण जो है पर कुछ नहीं कहता। केवल मौजूदगी नहीं, सामग्री का नमूना लें।
- बिना स्वामी की पाइपलाइन। वह सड़ती है। टीम नामित करें और उसे समय दें।
- नीति की त्रुटियों को कोड के दोष मानना। लोग द्वारों को अनदेखा करना सीख जाते हैं। रोकों को वर्गीकृत करें और नीति ठीक करें।
- आपात स्थितियों के लिए हाथ का रास्ता नहीं। लोग बाईपास करते हैं। तेज़, ऑडिट किया रास्ता दें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वयन |
|---|---|---|---|---|---|
| पाइपलाइन की विश्वसनीयता | तदर्थ बिल्ड; बार-बार अस्पष्ट विफलताएँ | पाइपलाइन है; सफलता ट्रैक | स्वामी, उद्देश्य, और अस्थिर परीक्षण की हैंडलिंग | अवधि और विफलताएँ चरण के अनुसार समीक्षित | पाइपलाइन टीमों के पार पैटर्न और क्षमता साझा करती हैं |
| अनुमोदन और नीति | सभी बदलावों के लिए हाथ का अनुमोदन | कुछ मानक बदलाव परिभाषित | मानक बदलावों के लिए परीक्षणों सहित कोड के रूप में नीति | अनुमोदन की श्रेणियाँ विफलता के डेटा से समीक्षित | जोखिम-आधारित अनुमोदन सहमत सीमाओं के भीतर अपने-आप ढलता है |
| प्रमाण और बाईपास | प्रमाण बाद में पुनर्निर्मित | कुछ प्रमाण दर्ज | आवश्यक प्रमाण दर्ज और जुड़ा | बाईपास का मिलान और पूर्णता का नमूना | प्रमाण और मिलान पूरी तरह स्वचालित और ऑडिट |
जाँच-सूची
- पाइपलाइन का नामित स्वामी है और विश्वसनीयता तथा गति के उद्देश्य हैं।
- पाइपलाइन की सफलता की दर और अवधि के परसेंटाइल चरण के अनुसार रिपोर्ट होते हैं।
- अस्थिर परीक्षण गिने जाते हैं और हर एक का स्वामी तथा सुधार की तिथि है।
- मानक परिवर्तन की श्रेणियाँ जोखिम के मानदंडों से परिभाषित और विफलता के डेटा से समीक्षित हैं।
- नीतियाँ कोड हैं, परखी और संस्करणित हैं, और संस्करण प्रति रन दर्ज होता है।
- बाईपास पाने के लिए उत्पादन की स्थिति का पाइपलाइन के रिकॉर्ड से मिलान होता है।
- हर डिप्लॉय बदलाव के लिए आवश्यक प्रमाण परिभाषित और दर्ज है।
- प्रमाण की पूर्णता सामग्री के नमूने से जाँची जाती है।
- ऑडिट किया आपातकालीन रास्ता है और परखा गया है।
- हर मीट्रिक के बगल में उसकी गेमिंग का रास्ता और सुरक्षा-रेखा दिखती है।
AI प्रॉम्प्ट
स्वचालित अनुमोदन के लिए बदलावों को जोखिम से वर्गीकृत करें।
Here is a list of the types of change we make and, for each, our recent history:
[paste change types with counts of changes and failures, if available]. Propose
which types might be candidates for automated approval and which should keep a
human reviewer, with the reasoning and the evidence I would need. Do not invent
failure rates. Mark each suggestion as a proposal for the change owners to
decide. List your assumptions and the data I should collect.
परिभाषित करें कि पाइपलाइन को कौन-सा प्रमाण दर्ज करना चाहिए।
Our pipeline is [description of stages and tools]. Our change records are kept in
[tool]. We must answer these questions after any deployment: [list questions
from auditors or incident reviewers]. Propose the evidence items the pipeline
should record and link, where to store them, and how to check that they are real
and not empty. Do not state compliance claims or legal requirements. List your
assumptions and questions for our compliance team.
अस्थिर परीक्षणों के डेटा का विश्लेषण करें।
Below is a summary of failing tests and rerun outcomes for [period]: [paste
data without personal information]. Identify tests that fail and then pass on
rerun, group them by area, and propose an order for fixing them. Do not guess
causes that the data does not support. Say what additional data would help. List
your assumptions.
पाइपलाइन के डैशबोर्ड के गेमिंग के जोखिम की समीक्षा करें।
We report these pipeline measures: [paste measures and definitions]. Context:
[team size, tools, audience]. For each measure, list realistic ways it could look
better without improving delivery or safety, propose a guardrail, and say how
that guardrail could be gamed. Do not invent benchmark values. List your
assumptions.
AI स्किल
- Change request: परिवर्तन के रिकॉर्ड और उसके प्रमाण में क्या होना चाहिए यह परिभाषित करने के लिए उपयोग करें।
- Release notes: पाइपलाइन के आउटपुट को उपयोगकर्ताओं और संचालन के नोट में बदलने के लिए उपयोग करें।
- Service Management Metrics skill: मीट्रिक और उसकी जोड़ीदार सुरक्षा-रेखा कवर करने वाला विषय खोजने के लिए उपयोग करें।
मुख्य निष्कर्ष
- पाइपलाइन एक साथ उत्पादन की सेवा और नियंत्रण है, इसलिए उसकी विश्वसनीयता, गति और उसके बनाए प्रमाण को मापें।
- उत्पादन का पाइपलाइन के रिकॉर्ड से मिलान करके बाईपास मापें, और पाइपलाइन को सबसे आसान रास्ता बनाएँ।
- केवल भली-भाँति समझे बदलाव स्वचालित अनुमोदित करें, परखी नीति और बाकी के लिए मानवीय रास्ते के साथ।
- अस्थिर परीक्षण गिनें और ठीक करें, क्योंकि हरा होने तक दोबारा चलाना भरोसा और प्रमाण नष्ट करता है।
- प्रमाण की सामग्री का नमूना लें, क्योंकि पूर्णता की गिनतियाँ खाली रिकॉर्ड से भी संतुष्ट हो सकती हैं।
संदर्भ और आगे का अध्ययन
- Wikipedia, Continuous integration.
- Wikipedia, Continuous delivery.
- Wikipedia, Software deployment.
- Wikipedia, DevOps.
- Wikipedia, Test automation.
- Wikipedia, ITIL.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.