अवलोकन और प्रेरणा

अधिकांश घटना के माप सामान्य बुरे दिन का वर्णन करते हैं: विफल डिप्लॉयमेंट, संतृप्त डेटाबेस, शोर करता पड़ोसी। सेवा निरंतरता दुर्लभ, गंभीर दिन का वर्णन करती है, जब कोई क्षेत्र विफल हो, डेटा स्टोर दूषित हो, आपूर्तिकर्ता लापता हो जाए, या रैनसमवेयर पूरी संपदा एन्क्रिप्ट कर दे। व्यावसायिक निरंतरता नियोजन (business continuity planning) संगठन को ऐसी घटनाओं के बीच भी स्वीकार्य स्तरों पर डिलीवरी जारी रखने के लिए तैयार करने का अनुशासन है। ITIL 4 में प्रैक्टिस का नाम सेवा निरंतरता प्रबंधन है, और यह उस बड़े उद्देश्य का IT सेवा का दृश्य है (देखें सहचर Service Management Guide में मेल खाता विषय)।

दो शब्द अधिकांश भार उठाते हैं। रिकवरी समय उद्देश्य (recovery time objective) (RTO) व्यवधान के बाद सेवा बहाल करने का स्वीकार्य समय है। रिकवरी बिंदु उद्देश्य (recovery point objective) (RPO) डेटा की हानि की स्वीकार्य मात्रा है, समय की अवधि के रूप में व्यक्त: एक घंटे के RPO का अर्थ है कि आख़िरी घंटे के राइट्स का खो जाना सहनीय है और उससे अधिक नहीं। दोनों व्यावसायिक प्रभाव विश्लेषण (business impact analysis) (BIA) से आते हैं, जो यह पहचानने की विधि है कि कौन-सी गतिविधियाँ सबसे अधिक मायने रखती हैं, क्या किस पर निर्भर है, और व्यवधान की लागत क्या है। उद्देश्य कीमत वाले व्यावसायिक निर्णय हैं, क्योंकि कसे उद्देश्यों को अधिक अतिरेक, अधिक स्वचालन और अधिक अभ्यास का समय चाहिए।

कठिनाई यह है कि उद्देश्य ऐसी भावी घटना के बारे में वादा है जो हुई नहीं। ईमानदार प्रमाण परीक्षण है। क्या टीम ने पिछले अभ्यास में सेवा RTO के भीतर बहाल की? क्या बहाल डेटा ने RPO पूरा किया? क्या योजना के चरण वही थे जो टीम ने वास्तव में उठाए? इसलिए निरंतरता का माप अधिकतर अभ्यासों का माप है, और माप की गुणवत्ता इस पर निर्भर है कि अभ्यास कितना यथार्थवादी था।

एजाइल और साइट विश्वसनीयता इंजीनियरिंग (SRE) टीमें इसमें उपयोगी आदतें लाती हैं। उनकी प्रणालियाँ हर सप्ताह बदलती हैं, इसलिए एक बार लिखी और दाख़िल की योजना महीनों में बासी हो जाती है। एजाइल उत्तर है बहाली को कोड के रूप में रखना (उदाहरण के लिए इंफ्रास्ट्रक्चर एज़ कोड (infrastructure as code) से), उसका अक्सर पूर्वाभ्यास करना, और हर पूर्वाभ्यास को बैकलॉग की मदों का स्रोत मानना। केऑस इंजीनियरिंग (chaos engineering) और गेम डे वही विचार छोटे पैमाने पर लागू करते हैं: जान-बूझकर, नियंत्रित तरीके से विफलता प्रेरित करें, और देखें क्या होता है। SRE का दृष्टिकोण Google की Site Reliability Engineering पुस्तक में वर्णित है, और व्यापक क्षेत्र साइट विश्वसनीयता इंजीनियरिंग (site reliability engineering) लेख में संक्षिप्त है।

दृष्टिकोण कैसे भिन्न हैं

  • ITIL दृष्टिकोण। सेवा निरंतरता प्रबंधन ऐसी प्रैक्टिस है जो BIA से बहाली के उद्देश्य तय करती है, योजनाएँ डिज़ाइन करती है, और परीक्षणों से उन्हें सिद्ध करती है। इसके आउटपुट योजनाएँ, अभ्यास की रिपोर्टें और दर्ज निष्कर्ष हैं। ISO 22301 मानक व्यावसायिक निरंतरता प्रबंधन प्रणाली का वर्णन करता है। अक्टूबर 2026 तक की स्थिति के अनुसार, यदि ग्राहक या नियामक अनुपालन माँगे तो वर्तमान संस्करण सीधे जाँचें।
  • एजाइल दृष्टिकोण। बहाली की क्षमता उत्पाद का गुण है, जो पूर्णता की परिभाषा में है। नया डेटा स्टोर जोड़ने वाली स्टोरी तब तक पूर्ण नहीं है जब तक उसके बहाली के रास्ते को आज़माया न गया हो।
  • SRE दृष्टिकोण। विश्वसनीयता का काम बजट से चलता और मापा जाता है। फ़ेलओवर, बहाली के ड्रिल और गेम डे स्वामियों के साथ निर्धारित काम हैं, और उनके निष्कर्ष बैकलॉग में जाते हैं।

यह विषय सात माप कवर करता है: परीक्षणों में समय और डेटा के उद्देश्यों के विरुद्ध बहाली, अभ्यास की कवरेज और नयापन, बैकअप की बहाली, निष्कर्षों का बंद होना, और योजना की सामयिकता। असली आउटेज बड़ी घटना के मीट्रिक्स (देखें विषय 3.4, बड़ी घटना के मीट्रिक्स) और उपलब्धता मीट्रिक्स (देखें विषय 5.3, उपलब्धता मीट्रिक्स) में हैं। उपयोगकर्ता-मुखी लक्ष्यों के रूप में व्यक्त उद्देश्य संकेतकों और बजटों के विषय में हैं (देखें विषय 5.2, SLI, SLO और त्रुटि बजट)। DORA शोध कार्यक्रम का "विफल डिप्लॉयमेंट की बहाली का समय" बहुत छोटी घड़ी है (देखें विषय 2.8, DORA मीट्रिक्स)। परीक्षणों से उजागर मूल कारण समस्या और सीखने के विषयों के हैं (देखें विषय 4.1, समस्या प्रबंधन मीट्रिक्स, और विषय 4.2, पोस्टमॉर्टम और सीखने के मीट्रिक्स)।

टियर सेवाओं का वर्ग है, इस आधार पर समूहित कि उन्हें कितनी जल्दी लौटना है। टेबलटॉप अभ्यास बिना प्रणाली के बदलाव की चर्चा-आधारित पूर्वाभ्यास है। गेम डे हाथ से किया पूर्वाभ्यास है जिसमें टीम विफलता प्रेरित या अनुकरण करती है और प्रतिक्रिया देखती है। निष्कर्ष (finding) योजना और जो हुआ उसके बीच का दर्ज अंतर है। योजना की सामयिकता यह है कि योजना आज की सेवा को कितनी अच्छी तरह दर्शाती है।

मुख्य सिद्धांत

  • पहले परखें, फिर दावा करें। RTO या RPO केवल उस बहाली से सत्यापित होता है जो वास्तव में की और समयबद्ध की गई। उद्देश्य और आख़िरी प्रदर्शित परिणाम साथ-साथ रिपोर्ट करें।
  • केवल सफलता नहीं, यथार्थता मापें। खाली परीक्षण डेटाबेस की बहाली जो मिनटों में पास हुई, उत्पादन के आकार की बहाली के बारे में कम बताती है। परिणाम के बगल में हर अभ्यास का दायरा और परिस्थितियाँ दर्ज करें।
  • संपदा को टियर करें और टियर के अनुसार प्रयास खर्च करें। महत्वपूर्ण सेवाओं को बार-बार, यथार्थवादी परीक्षण मिलते हैं। निम्न-टियर की सेवाओं को हल्की जाँचें। सबके लिए एक आवृत्ति का लक्ष्य प्रयास बर्बाद करता है या जोखिम चूकता है।
  • निष्कर्षों को अभ्यास का उत्पाद मानें। गेम डे का मूल्यवान आउटपुट अंतरों की बंद सूची है। बिना निष्कर्ष का परीक्षण या तो उत्कृष्ट है या बहुत नरम, और आपको पता लगाना चाहिए कि कौन-सा।
  • सेवाओं और रोटेशनों का वर्णन करें, व्यक्तियों का कभी नहीं। अभ्यास के परिणाम प्रणाली और योजना का वर्णन करते हैं। ड्रिल को कितनी जल्दी बहाल किया इस पर किसी को रैंक नहीं किया जाता।
  • हर अभ्यास को अपनी पंक्ति में दिखाएँ। प्रति सेवा प्रति वर्ष थोड़े परीक्षण होते हैं, इसलिए औसत भ्रमित करते हैं (देखें विषय 1.6, सेवा मीट्रिक्स के लिए सांख्यिकीय साक्षरता)।

मीट्रिक परिभाषाएँ

हर मीट्रिक घड़ी या गिनती, क्या बाहर है, और डेटा स्रोत सूचीबद्ध करती है। भरोसा करने से पहले हर पंक्ति को लिखित नियम चाहिए। नीचे "टियर-1 सेवा" का अर्थ आपके अपने BIA द्वारा परिभाषित सर्वोच्च बहाली टियर की सेवा है।

मीट्रिक परिभाषा सूत्र इकाई डेटा स्रोत ITIL प्रैक्टिस एजाइल समकक्ष आवृत्ति
RTO पूरा होने की दर बहाली के अभ्यासों का हिस्सा जिनमें सेवा अपने बताए RTO के भीतर बहाल हुई वे अभ्यास जिनमें बहाली का समय <= RTO / चलाए गए अभ्यास। घड़ी अभ्यास की विफलता की घोषित शुरुआत (इंजेक्शन का समय या परिदृश्य की घोषणा) पर शुरू होती है और तब रुकती है जब सेवा वास्तविक या सिंथेटिक उपयोगकर्ताओं के लिए अपनी सहमत स्वास्थ्य जाँच पास करे। टेबलटॉप अभ्यास और बिना समयबद्ध बहाली वाले अभ्यास बाहर हैं और अलग गिने जाते हैं प्रतिशत, अभ्यासों की संख्या दिखाकर अभ्यास की रिपोर्ट, मॉनिटरिंग की समय-रेखा, RTO के साथ सेवा रजिस्टर सेवा निरंतरता प्रबंधन; उपलब्धता प्रबंधन गेम डे का परिणाम; डिलीवरी के मापों में बहाली का समय प्रति अभ्यास; त्रैमासिक रोल-अप
RPO पूरा होने की दर बहाली के अभ्यासों का हिस्सा जिनमें डेटा की हानि बताए RPO के भीतर रही वे अभ्यास जिनमें मापी डेटा की हानि की अवधि <= RPO / वे अभ्यास जो डेटा बहाल करते हैं। डेटा की हानि की अवधि बहाली के बाद मौजूद आख़िरी राइट और विफलता के क्षण के बीच का समय है। जो अभ्यास कोई अवस्था बहाल नहीं करते वे बाहर प्रतिशत, अभ्यासों की संख्या दिखाकर अभ्यास की रिपोर्ट, बहाल डेटा की स्रोत या राइट लॉग से तुलना सेवा निरंतरता प्रबंधन; सूचना सुरक्षा प्रबंधन पूर्णता की परिभाषा के भाग के रूप में बहाली का ड्रिल प्रति अभ्यास; त्रैमासिक रोल-अप
परखी गई बहाली की कवरेज टियर-1 और टियर-2 सेवाओं का हिस्सा जिनका अपने सहमत परीक्षण अंतराल के भीतर हाथ से बहाली का परीक्षण हुआ वे सेवाएँ जिनका अंतराल के भीतर योग्य परीक्षण है / दायरे की सेवाएँ। योग्य परीक्षण हाथ से किया हुआ है (केवल टेबलटॉप नहीं) और परीक्षण या उत्पादन परिवेश में सेवा बहाल करता है। अंतराल प्रति टियर तय होता है प्रतिशत, टियर के अनुसार सेवा रजिस्टर, अभ्यास का कैलेंडर और रिपोर्टें सेवा निरंतरता प्रबंधन; सेवा कैटलॉग प्रबंधन गेम डे की अनुसूची मासिक
आख़िरी सफल बहाली के परीक्षण के बाद के दिन हर महत्वपूर्ण सेवा के सबसे हाल के पास हुए बहाली के परीक्षण की आयु रिपोर्ट की तिथि घटा उस सबसे हाल के परीक्षण की तिथि जिसने RTO और RPO दोनों पूरे किए। विफल परीक्षण घड़ी रीसेट नहीं करता। कभी न परखी सेवाएँ "कभी नहीं" के रूप में दिखाई जाती हैं, शून्य के रूप में नहीं दिन, प्रति सेवा, सबसे पुरानी को उभारकर अभ्यास की रिपोर्टें, सेवा रजिस्टर सेवा निरंतरता प्रबंधन गेम डे की अनुसूची; कार्य-मद की आयु मासिक
बैकअप की बहाली की सफलता की दर बैकअप से प्रयास की गई बहालियों का हिस्सा जो सत्यापित, उपयोग योग्य डेटा के साथ पूरी हुईं वे बहालियाँ जो पूरी हुईं और डेटा सत्यापन की जाँच पास की / प्रयास की गई बहालियाँ, स्वचालित और हाथ के बहाली के परीक्षणों में। केवल बैकअप जॉब की सफलता बाहर, क्योंकि जो जॉब चली वह बहाली नहीं है जो काम की प्रतिशत, डेटा के टियर के अनुसार बैकअप प्रणाली के लॉग, स्वचालित बहाली के सत्यापन के परिणाम सेवा निरंतरता प्रबंधन; इंफ्रास्ट्रक्चर और प्लैटफ़ॉर्म प्रबंधन बहाली का ड्रिल; पूर्णता की परिभाषा में संचालन-योग्यता की कसौटियाँ स्वचालित परीक्षणों के लिए साप्ताहिक; समीक्षा में मासिक
अभ्यास के निष्कर्षों के बंद होने की दर बहाली के अभ्यासों के निष्कर्षों का हिस्सा जो अपने सहमत समय में बंद हुए, गंभीरता के अनुसार बाँटा हुआ लक्ष्य के भीतर बंद निष्कर्ष / अवधि में देय हुए निष्कर्ष। घड़ी तब शुरू होती है जब निष्कर्ष अभ्यास की रिपोर्ट में दर्ज हो और सत्यापित सुधार पर रुकती है, जिसका अर्थ है पुनः-परीक्षण या समीक्षा जो उसकी पुष्टि करे। नामित स्वामी द्वारा जोखिम के रूप में स्वीकार निष्कर्ष अलग गिने जाते हैं प्रतिशत, देर से हुए निष्कर्षों की गिनती के साथ अभ्यास की रिपोर्ट, इश्यू ट्रैकर सेवा निरंतरता प्रबंधन; सतत सुधार रेट्रोस्पेक्टिव की कार्रवाई मदें; बैकलॉग मद की आयु मासिक
योजना की सामयिकता निरंतरता की योजनाओं और रनबुकों का हिस्सा जिनकी समीक्षा उनकी सेवा के आख़िरी भौतिक बदलाव के बाद, या उनके समीक्षा अंतराल के भीतर, हुई वे योजनाएँ जिनकी समीक्षा की तिथि आख़िरी भौतिक बदलाव के बाद की है और अंतराल के भीतर / दायरे की योजनाएँ। भौतिक बदलाव का अर्थ है परिवर्तन का रिकॉर्ड जो आर्किटेक्चर, डेटा स्टोर, निर्भरताओं या आपूर्तिकर्ताओं को बदलने के रूप में चिह्नित है प्रतिशत, सबसे पुरानी असमीक्षित योजना की आयु के साथ योजनाओं का भंडार (संस्करण नियंत्रण), परिवर्तन के रिकॉर्ड, सेवा रजिस्टर सेवा निरंतरता प्रबंधन; परिवर्तन सक्षमीकरण पूर्णता की परिभाषा में रनबुक का अद्यतन शामिल त्रैमासिक

अभ्यास में RTO की घड़ी असली आउटेज की घड़ी से भिन्न है, जो प्रभाव पर शुरू होती है (देखें विषय 3.4, बड़ी घटना के मीट्रिक्स), इसलिए अभ्यासों की तुलना अभ्यासों से करें। कसकर लिखी स्क्रिप्ट वाला अभ्यास पूर्वाभ्यास की गति मापता है, इसलिए दर्ज करें कि उसमें कितना आश्चर्य था।

सिफ़ारिशें

ऐसे उद्देश्य तय करें जो परखे जा सकें

1. RTO और RPO व्यावसायिक प्रभाव विश्लेषण से निकालें, और उन्हें सेवा के बगल में लिखें। BIA व्यवसाय से पूछता है कि एक घंटे, एक दिन और एक सप्ताह के आउटेज की लागत क्या है और वह कितना डेटा खोना सहन कर सकता है। उत्तर सेवा रजिस्टर में दर्ज करें ताकि हर परीक्षण की तुलना बताए उद्देश्य से हो सके। केवल इंजीनियरों द्वारा चुने उद्देश्य या तो असंभव रूप से महँगे होते हैं या ग्राहकों की ज़रूरत से असंबद्ध।

2. सेवाओं को टियर करें और टियर के अनुसार परीक्षण के अंतराल तय करें। थोड़े टियर, शायद तीन या चार, हर सेवा के लिए अलग नियम से चलाना आसान हैं। शीर्ष टियर को सबसे बार-बार और सबसे यथार्थवादी परीक्षण दें, और सबसे निचले टियर को हल्की जाँच, जैसे नमूने की आवधिक बहाली। अंतराल लिखें और BIA बदलने पर उनकी समीक्षा करें।

3. जाँचें कि उद्देश्य आर्किटेक्चर से मेल खाता है। रात के बैकअप के साथ पाँच मिनट का RPO ऐसा विरोधाभास है जिसे परीक्षण सबसे बुरे क्षण पर उजागर करेगा। पहले अभ्यास से पहले हर उद्देश्य की तुलना बैकअप, रेप्लिकेशन और फ़ेलओवर के डिज़ाइन से करें, और कोई अंतर निष्कर्ष के रूप में दर्ज करें।

ऐसे तरीकों से परखें जो कुछ उजागर करें

4. टेबलटॉप, बहाली के ड्रिल और गेम डे मिलाएँ। टेबलटॉप अभ्यास सस्ता है और भूमिकाओं, संपर्कों और निर्णयों के अंतर खोजता है। हाथ से किया बहाली का ड्रिल प्रक्रियाओं, अनुमतियों और डेटा के अंतर खोजता है। गेम डे, जो विफलता प्रेरित करता है और प्रतिक्रिया देखता है, मॉनिटरिंग, रनबुक और समन्वय के अंतर खोजता है। हर प्रकार अलग रिपोर्ट करें ताकि आसान टेबलटॉप की कतार बहाली का प्रमाण न दिखे।

5. उत्पादन के आकार के डेटा पर बहाली को समयबद्ध करें। छोटी प्रति पर चलने वाली बहाली वास्तविक मात्रा पर थ्रूपुट या स्टोरेज की सीमाओं से विफल हो सकती है। जहाँ पूर्ण पैमाने के परीक्षण बार-बार चलाने के लिए बहुत महँगे हों, वहाँ समय-समय पर एक चलाएँ और कोई एक्सट्रापोलेशन बताएँ। परिणाम के साथ डेटा का आकार दर्ज करें।

6. सत्यापित करें कि बहाल डेटा उपयोग योग्य है। बहाली के बाद स्वचालित जाँच जोड़ें, जैसे पंक्तियों की गिनती, चेकसम, या सिंथेटिक लेन-देन। बहाली को तभी सफल गिनें जब वह जाँच पास हो।

7. आश्चर्य धीरे-धीरे जोड़ें। शुरुआती अभ्यास घोषित और स्क्रिप्ट किए जा सकते हैं। बाद वाले विफलता का विवरण रोककर रखें और ऐसी निर्भरताएँ शामिल करें जैसे समाप्त हुई क्रेडेंशियल या पहुँच से बाहर आपूर्तिकर्ता। आश्चर्य का स्तर दर्ज करें ताकि परिणाम संदर्भ में पढ़े जा सकें।

निष्कर्षों को बदलाव में बदलें

8. हर निष्कर्ष को स्वामी, गंभीरता और देय तिथि के साथ दर्ज करें। गेम डे सूची बनाता है: लापता अनुमति, रनबुक का चरण जो अब औज़ार से मेल नहीं खाता, मॉनिटर जो कभी बजा नहीं। हर एक को टीम के बैकलॉग में फ़ीचर के काम जितनी दृश्यता के साथ रखें। खुले निष्कर्षों की आयु और समय पर बंद का हिस्सा ट्रैक करें, और जहाँ व्यावहारिक हो पुनः-परीक्षण से बंद होने की पुष्टि करें।

9. निष्कर्षों को समस्या प्रबंधन और सीखने से जोड़ें। जो निष्कर्ष अभ्यासों में दोहराता है वह ITIL के अर्थ में समस्या है (देखें विषय 4.1, समस्या प्रबंधन मीट्रिक्स)। हर अभ्यास की समीक्षा बिना दोष के करें, जैसे पोस्टमॉर्टम की, और कार्रवाइयाँ बंद होने तक ट्रैक करें (देखें विषय 4.2, पोस्टमॉर्टम और सीखने के मीट्रिक्स)।

योजनाओं को जीवित रखें

10. योजनाएँ और रनबुक संस्करण नियंत्रण में रखें, और उन्हें परिवर्तन से जोड़ें। जब परिवर्तन का रिकॉर्ड आर्किटेक्चर, डेटा स्टोर या आपूर्तिकर्ता बदले, तो आवश्यक करें कि स्वामी योजना की समीक्षा उसी काम में हो (देखें विषय 4.3, परिवर्तन सक्षमीकरण मीट्रिक्स)। योजना की सामयिकता आख़िरी भौतिक बदलाव के विरुद्ध मापें, केवल कैलेंडर के नहीं। हर तिमाही समीक्षित योजना जो पिछले महीने के माइग्रेशन को अनदेखा करती है, नाम की ही सामयिक है।

11. निर्भरता का नक्शा ईमानदार रखें। बहाली का क्रम साझा सेवाओं पर निर्भर है, जैसे पहचान, नाम का समाधान और सीक्रेट का भंडार। नक्शे को कॉन्फ़िगरेशन के रिकॉर्डों से मिलाएँ और अभ्यासों से उजागर अंतर ठीक करें (देखें विषय 7.4, कॉन्फ़िगरेशन और CMDB गुणवत्ता मीट्रिक्स)।

12. आपूर्तिकर्ताओं को शामिल करें, और अभ्यास की ड्यूटी घुमाएँ। हर महत्वपूर्ण आपूर्तिकर्ता से उसके अपने परीक्षण का प्रमाण माँगें और संयुक्त चरणों का अभ्यास करने पर सहमत हों (देखें विषय 8.4, आपूर्तिकर्ता और अनुबंध मीट्रिक्स)। अभ्यास समय लेते हैं, इसलिए ड्यूटी रोटेशन में बाँटें और उसे परिचालन भार गिनें (देखें विषय 5.7, टॉइल और ऑन-कॉल मीट्रिक्स)।

गेमिंग के रास्ते और सुरक्षा-रेखाएँ

निरंतरता की संख्याओं की चापलूसी आसान है क्योंकि अभ्यास को कम लोग ध्यान से देखते हैं, और असली परीक्षण शायद ही होता है। तालिका हर मीट्रिक को गेमिंग के एक तरीके और उसे पकड़ने वाली जाँच से जोड़ती है। जोड़ियाँ विषय 1.2 में तय रूप का पालन करती हैं (देखें विषय 1.2, गुडहार्ट का नियम और मीट्रिक्स का मनोविज्ञान)।

मीट्रिक इसमें गेमिंग कैसे होती है जोड़ीदार सुरक्षा-रेखा मीट्रिक या प्रथा
RTO पूरा होने की दर छोटा परीक्षण डेटासेट, आसान परिदृश्य, या पूर्वाभ्यास की स्क्रिप्ट चुनना; टीम के शुरू करने के बाद घड़ी देर से शुरू करना; स्वास्थ्य जाँच ढीली करना ताकि "बहाल" जल्दी आए; उदार RTO रखना ताकि हर परीक्षण पास हो हर परिणाम के साथ डेटा का आकार, परिदृश्य का आश्चर्य और स्वास्थ्य जाँच की परिभाषा दर्ज करें; RTO की तुलना BIA से करें; हर अभ्यास अपनी पंक्ति में दिखाएँ, विफलताएँ सहित
RPO पूरा होने की दर हानि केवल प्राथमिक तालिका के लिए मापना, सारी अवस्था के लिए नहीं; ऐसी रेप्लिका परखना जो सिंक में है क्योंकि कोई भार नहीं चल रहा; छूटे परिणाम के बाद RPO को पुनः-परिभाषित करना दायरे के सभी डेटा स्टोर में राइट लॉग के विरुद्ध डेटा की हानि सत्यापित करें; यथार्थवादी राइट भार में परखें; उद्देश्यों का परिवर्तन लॉग कारणों के साथ रखें
परखी गई बहाली की कवरेज टेबलटॉप चर्चाओं को परीक्षण गिनना; प्रतिशत बढ़ाने के लिए मामूली छोटी सेवा परखना; सेवाओं को निचले टियर में पुनर्वर्गीकृत करके दायरे की सूची घटाना टियर-1 की गिनती के लिए हाथ से किए परीक्षण आवश्यक करें; सेवा के महत्व से भारित कवरेज रिपोर्ट करें; टियर के बदलावों का BIA के विरुद्ध ऑडिट
आख़िरी सफल बहाली के परीक्षण के बाद के दिन आयु रीसेट करने के लिए आसान परीक्षण दोबारा चलाना; आंशिक परीक्षण को पास लेबल करना; काग़ज़ी समीक्षा के बाद तिथि रीसेट करना आख़िरी पास हुए परीक्षण का दायरा दिखाएँ; सबसे पुरानी आयु और कभी न परखी सेवाएँ दिखाएँ; RTO और RPO दोनों पूरे हुए हों यह आवश्यक करें
बैकअप की बहाली की सफलता की दर बैकअप जॉब की सफलता को बहाली की सफलता रिपोर्ट करना; केवल उन बैकअप को परखना जिनका अच्छा होना ज्ञात है; ऐसी जाँच से सत्यापन जो विफल हो ही नहीं सकती यादृच्छिक रूप से चुने बैकअपों की बहालियाँ ट्रैक करें; डेटा सत्यापन का परिणाम आवश्यक करें; हर ऑडिट में जाँच की स्वयं समीक्षा करें
अभ्यास के निष्कर्षों के बंद होने की दर बिना सुधार के निष्कर्ष बंद करना; देय तिथि ढीली करने के लिए गंभीरता घटाना; एक निष्कर्ष को कई आसान निष्कर्षों में बाँटना; शुरू से ही कम निष्कर्ष दर्ज करना पुनः-परीक्षण से बंद होना सत्यापित करें; बंद होने की दर के बगल में प्रति अभ्यास निष्कर्ष रिपोर्ट करें, क्योंकि गिरती गिनती नरम अभ्यासों का अर्थ हो सकती है; गंभीरता के बदलावों की समीक्षा
योजना की सामयिकता योजना पढ़े बिना समीक्षा की तिथि अद्यतन करना; बदलावों को अभौतिक चिह्नित करना; योजना में सामान्य पाठ भरना जो कभी बासी नहीं होता योजनाओं का नमूना लें और उन्हें ऐसे व्यक्ति के साथ जाँचें जिसने नहीं लिखा; भौतिक-बदलाव के चिह्न की दर की तुलना आर्किटेक्चर के बदलाव के इतिहास से करें; सामयिकता को परीक्षण के परिणामों से जोड़ें

स्वस्थ पठन प्रति तिमाही मुट्ठी भर परीक्षण ईमानदार भिन्नता के साथ दिखाता है: कुछ पहली कोशिश में पास हुए, कुछ विफल हुए और दोहराए गए, और हर एक के निष्कर्ष बैकलॉग में दिखते हैं और बताए समय में बंद होते हैं। साल-दर-साल परिपूर्ण अंक पूछने का कारण हैं कि अभ्यास कितने कठिन हैं।

समझौते: लाभ और हानि

तरीका ताकत कमज़ोरी
बार-बार के छोटे स्वचालित बहाली के परीक्षण सस्ता, निरंतर प्रमाण; चुप बैकअप विफलता जल्दी पकड़ता है समन्वय, लोगों या पूर्ण पैमाने की बहाली को नहीं परखता
वार्षिक पूर्ण पैमाने का फ़ेलओवर अभ्यास यथार्थवादी; लोगों, आपूर्तिकर्ताओं और निर्भरताओं को साथ परखता है महँगा और दुर्लभ; सुधार के बाद दोहराना कठिन; उत्पादन में चलाने पर जोखिम
टेबलटॉप अभ्यास कम लागत; भूमिकाओं और निर्णयों के अंतर खोजता है; प्रशिक्षण के लिए अच्छा यह सिद्ध नहीं करता कि तकनीक काम करती है; बिना सीखे चलाना आसान
प्रेरित विफलता वाले उत्पादन के गेम डे उच्चतम यथार्थता; मॉनिटरिंग और रनबुक को जैसे हैं वैसे परखता है परिपक्व सुरक्षा उपाय और नेतृत्व का समर्थन चाहिए; लापरवाही से चलाने पर ग्राहकों को नुकसान
टियर वाले उद्देश्य प्रयास वहाँ खर्च करता है जहाँ जोखिम है टियर के निर्धारण भटक सकते हैं और उन्हें स्वामी चाहिए

व्यावहारिक उत्तर परतों वाला कार्यक्रम है: हर समय सस्ती स्वचालित बहाली की जाँचें, हर टियर-1 सेवा के लिए निश्चित अंतराल पर हाथ के ड्रिल, लंबे चक्र पर बड़ा अभ्यास, और निर्णयों तथा संचार के लिए टेबलटॉप। अंतराल बताएँ ताकि पाठक आँक सके कि प्रमाण कितना हाल का है।

अपनी टीम के साथ चर्चा के प्रश्न

1. हमने अपनी सबसे महत्वपूर्ण सेवा आख़िरी बार कब बहाल की, और ठीक क्या सिद्ध किया? तिथि, डेटा का आकार, परिदृश्य और परिणाम पूछें, और उन्हें बोर्ड पर लिखें। सूत्रधार निर्णय देने का विरोध करे और दावे और प्रमाण के बीच के अंतर पर ध्यान दे। उस एक परीक्षण पर सहमत होकर समाप्त करें जो सबसे बड़ा अंतर बंद करेगा।

2. हमारे RTO और RPO किसने चुने, और क्या व्यवसाय उन्हें आज भी चुनेगा? हर उद्देश्य को व्यावसायिक प्रभाव विश्लेषण या निर्णय तक अनुरेखित करें। पूछें कि क्या आर्किटेक्चर काग़ज़ पर उद्देश्य पूरा कर सकता है, और क्या उसे पूरा करने की लागत कभी बताई गई। सहमत हों कि शीर्ष सेवाओं के उद्देश्य व्यवसाय से कौन पुष्ट करेगा और कब तक।

3. विफल अभ्यास की हमारी साख में क्या कीमत होगी, और क्या वह हमारे अभ्यासों की कठिनाई को आकार देती है? यह प्रश्न वह दबाव उजागर करता है जो अभ्यासों को नरम बनाता है। पूछें कि विफल परीक्षण टीम की विफलता माना जाता है या अभ्यास की सफलता।

4. हमारे पिछले अभ्यास के कौन-से निष्कर्ष अब भी खुले हैं, और क्यों? सूची आयु और स्वामियों के साथ ज़ोर से पढ़ें। हर देर से हुई मद के लिए पूछें कि उसे क्या रोक रहा है: प्रतिस्पर्धी काम, अस्पष्ट स्वामित्व, लागत, या यह विश्वास कि जोखिम स्वीकार्य है। उद्देश्य यह है कि कोई निष्कर्ष बिना स्वामी की अवस्था में न रहे।

5. हमारी योजना क्या मानती है जो अब सच नहीं है? एक योजना चुनें और उसे उस व्यक्ति के साथ पढ़ें जिसने उसे नहीं लिखा। सेवानिवृत्त औज़ार, नाम बदले खाते और चले गए आपूर्तिकर्ता खोजें। पूछें कि सेवा बदलने पर योजना कैसे अद्यतन होगी, और न होने पर कौन नोटिस करता है। उत्तर को परिवर्तन की प्रक्रिया से जोड़ें।

6. कौन-सी निर्भरता सब कुछ रोक देगी, और क्या हमने उसके बिना कभी परखा है? साझा सेवाएँ जैसे पहचान, नाम का समाधान, सीक्रेट और पेजिंग प्रणाली स्वयं आम एकल विफलता बिंदु हैं। टीम से उन्हें नामित करने और बताने को कहें कि हर एक आख़िरी बार जान-बूझकर कब अनुपलब्ध थी।

चार दृष्टिकोण

उत्पाद और डिलीवरी टीमें

उत्पाद की टीमें वह डिज़ाइन रखती हैं जो बहाली संभव बनाता है, इसलिए वे निरंतरता से महत्वपूर्ण सेवाओं की पूर्णता की परिभाषा के भाग के रूप में मिलती हैं: बैकअप का रास्ता, बहाली की प्रक्रिया, और काम करने वाली रनबुक। उन्हें बहाली के ड्रिल अपनी लय के भाग के रूप में चलाने चाहिए, बहाली का कोड सेवा के साथ रखना चाहिए, और विफल ड्रिल को बैकलॉग की मद मानना चाहिए।

सेवा और संचालन टीमें

संचालन टीमें अधिकांश अभ्यास चलाती हैं और उनकी तैयारी का भार ढोती हैं। उन्हें अभ्यास का कैलेंडर रखना चाहिए, अभ्यास चलते समय समय-रेखाएँ दर्ज करनी चाहिए, और निष्कर्ष उसी दिन लिखने चाहिए। परिणाम सेवा और योजना का वर्णन करते हैं, और ड्रिल को किसी व्यक्ति ने कितनी जल्दी बहाल किया इस पर किसी को रैंक नहीं किया जाता।

नेतृत्व और शासन

नेता व्यवसाय के साथ उद्देश्य तय करते हैं और निर्णय लेते हैं कि कितनी बहाली खरीदना सार्थक है। उन्हें हर उद्देश्य के बगल में आख़िरी प्रदर्शित परिणाम, प्रमाण की आयु, और खुले निष्कर्ष देखने माँगने चाहिए, और साफ़-सुथरी शीट को पुरस्कृत करने से बचना चाहिए। शासन निकायों को निरंतरता के मापों का छोटा, स्थिर सेट अपेक्षित करना चाहिए, जो जोखिम रजिस्टर से और जहाँ लागू हो विनियमित रिपोर्टिंग से जुड़ा हो (देखें विषय 8.2, जोखिम और नियंत्रण मीट्रिक्स, और विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।

ग्राहक और उपयोगकर्ता

ग्राहक निरंतरता को शायद ही कभी देखते हैं जब तक वह मायने न रखे, और तब वे उसे पूरी तरह परिणाम से आँकते हैं: वे सेवा के बिना कितनी देर रहे और उनका डेटा बचा या नहीं। उन्हें इसके स्पष्ट कथन से लाभ होता है कि क्या वादा किया गया है, ऐसे शब्दों में जिन्हें वे समझ सकें, और तब ईमानदार संवाद से जब घटना योजना को लागू करे। जहाँ अनुबंधों में बहाली की प्रतिबद्धताएँ हैं, वहाँ अनुरोध पर अभ्यास का प्रमाण साझा करें (देखें विषय 5.1, SLA, OLA और XLA मीट्रिक्स)।

व्यवहार में: सेवा प्रबंधन का एक उदाहरण

एक क्षेत्रीय अस्पताल का IT विभाग मरीज़ शेड्यूलिंग प्रणाली, मेडिकल इमेजिंग आर्काइव और कर्मचारी मैसेजिंग सेवा चलाता है। आठ लोगों की उत्पाद टीम शेड्यूलिंग का रख-रखाव करती है, और संचालन टीम प्लैटफ़ॉर्म चलाती है। इस उदाहरण की सभी संख्याएँ दृष्टांत के लिए हैं।

विभाग का रजिस्टर शेड्यूलिंग को 2 घंटे के RTO और 15 मिनट के RPO के साथ टियर 1 सूचीबद्ध करता है। उसकी त्रैमासिक रिपोर्ट "RTO पूरा होने की दर: 4 अभ्यासों में 100 प्रतिशत" और "परखी गई बहाली की कवरेज: 100 प्रतिशत" दिखाती है। संचालन के नए प्रमुख संख्याओं के पीछे की अभ्यास रिपोर्टें पढ़ते हैं। चार में से तीन अभ्यास टेबलटॉप थे, और एकमात्र हाथ की बहाली ने डेटाबेस की प्रति उपयोग की जिसमें उत्पादन के डेटा का लगभग दसवाँ हिस्सा था। 14 महीनों से किसी ने बैकअप को साफ़ परिवेश में बहाल नहीं किया था।

टीम तय करती है कि जो मापा और परखा जाता है उसे बदलेगी। वह परखी गई बहाली की कवरेज को केवल हाथ के परीक्षण गिनने के रूप में पुनः-परिभाषित करती है, जो तीन टियर-1 सेवाओं में आँकड़ा 33 प्रतिशत पर ले आता है। वह शेड्यूलिंग के लिए पंक्तियों की गिनती के स्वचालित सत्यापन और सिंथेटिक बुकिंग लेन-देन के साथ उत्पादन के आकार की बहाली निर्धारित करती है। दौड़ 2 घंटे के RTO के विरुद्ध 3 घंटे 40 मिनट लेती है, और बहाल डेटा विफलता के बिंदु से 40 मिनट पीछे है जबकि RPO 15 मिनट का है, क्योंकि माइग्रेशन के दौरान लॉग शिपिंग रोकी गई थी और कभी फिर शुरू नहीं हुई। गेम डे 9 निष्कर्ष देता है: 2 उच्च, 5 मध्यम और 2 निम्न गंभीरता के।

लॉग में दर्ज निर्णय है कि चूक को साल का सबसे मूल्यवान परिणाम माना जाए। टीम लॉग शिपिंग फिर शुरू करने के लिए उसके विलंब पर अलर्ट के साथ, बहाली को समानांतर करने के लिए, और एक डेटा वॉल्यूम को तेज़ स्टोरेज पर ले जाने के लिए काम खोलती है। RTO 2 घंटे पर रहता है, और टीम शेड्यूलिंग के लिए हाथ का दर्ज वैकल्पिक रास्ता जोड़ती है। पहले 60 दिनों में निष्कर्षों के बंद होने की दर 9 में से 7 समय पर है, और बाकी दो नामित स्वामियों ने जोखिम के रूप में स्वीकार किए।

यहाँ पकड़ा गया गेमिंग का जोखिम सूक्ष्म था। किसी ने संख्या नहीं गढ़ी: टेबलटॉप की उदार गिनती और छोटे परीक्षण डेटासेट ने रिपोर्ट हरी बना दी। जो सुरक्षा-रेखाएँ काम आईं, वे हर परिणाम के साथ डेटा का आकार और अभ्यास का प्रकार दर्ज करना, और अंतर्निहित अभ्यास की रिपोर्टें पढ़ने की प्रथा थीं। अगली रिपोर्ट में टीम हर अभ्यास अपनी पंक्ति में दिखाती है, विफल दौड़ सहित।

एजाइल, AI, स्वचालन और विश्लेषण

एजाइल

हितधारकों के साथ छोटे, बार-बार के अभ्यासों में बहाली का पूर्वाभ्यास करें और जो वे उजागर करें उसे ठीक करें। सावधानी यह है कि स्क्रिप्ट किए अभ्यास जो हमेशा पास होते हैं, झूठा आराम देते हैं।

AI

AI सेवाएँ बहाली की योजना में नई निर्भरताएँ जोड़ती हैं, जैसे मॉडल, वेक्टर स्टोर और तीसरे पक्ष के API। उन्हें परखी गई बहाली की कवरेज में शामिल करें और बहाली के समय को इस जाँच से जोड़ें कि बहाली के बाद उत्तर सही हैं। सावधानी यह है कि बहाल की AI सेवा अलग मॉडल संस्करण चला सकती है या अपना डेटा खो सकती है, इसलिए केवल उपलब्धता नहीं, व्यवहार सत्यापित करें।

स्वचालन

बैकअप का सत्यापन और बहाली के परीक्षण स्वचालित करें, और स्वचालन को विफल बहालियों पर मापें। सावधानी यह है कि जो बैकअप पूरा होता है वह बैकअप नहीं है जो बहाल होता है, इसलिए बहाली परखें।

विश्लेषण

परीक्षणों में पूरे हुए उद्देश्य आख़िरी परीक्षण की तिथियों के साथ, और बंद किए अभ्यास के निष्कर्ष रिपोर्ट करें। यह जिस निर्णय को सूचित करता है वह है कि कौन-सी बहाली सबसे कम सिद्ध है। सावधानी यह है कि कम असली बहालियों का अर्थ है छोटे नमूने, इसलिए गिनतियाँ दिखाएँ।

क्षेत्र का नज़रिया

स्टार्टअप। आमतौर पर एक उत्पादन परिवेश, छोटी टीम और प्रबंधित क्लाउड प्रदाता होता है। सबसे मूल्यवान माप सबसे सरल है: हर महीने उत्पादन के डेटाबेस को बैकअप से साफ़ परिवेश में बहाल करें, समय लें और परिणाम सत्यापित करें। RTO और RPO एक पृष्ठ पर लिखें।

छोटा व्यवसाय। IT अक्सर आउटसोर्स होता है या होस्ट की सेवाओं पर एक-दो लोग चलाते हैं। आपूर्तिकर्ता से लिखित में पूछें कि वह किस बहाली पर प्रतिबद्ध है और कौन-सा प्रमाण दिखा सकता है, और हर तिमाही अपने डेटा की एक बहाली परखें। एक पृष्ठ की योजना वहाँ रखें जहाँ मुख्य प्रणालियाँ बंद होने पर वह पढ़ी जा सके।

उद्यम। कई सेवाएँ, कई आपूर्तिकर्ता और साझा प्लैटफ़ॉर्म टियर और निर्भरता का नक्शा अनिवार्य बनाते हैं। उद्देश्यों वाले केंद्रीय सेवा रजिस्टर, अभ्यास के कैलेंडर, स्वचालित बहाली के सत्यापन और एकसमान रिपोर्टिंग में निवेश करें ताकि परिणाम टीमों में तुलनीय हों।

सरकार और सार्वजनिक क्षेत्र। निरंतरता के कर्तव्य कानून, ऑडिट या नीति से आ सकते हैं, और सार्वजनिक सेवा को आपातकालों में काम करते रहना पड़ सकता है। परीक्षण का प्रमाण अक्सर बाहर से जाँचा जाता है, इसलिए अभ्यास की रिपोर्टें, निष्कर्ष और बंद होने के रिकॉर्ड ऐसे रूप में रखें जिसे ऑडिटर पढ़ सके। खरीद बहाली की व्यवस्थाएँ बाँध सकती है, इसलिए अनुबंधों में अभ्यास के अधिकार और प्रमाण शामिल करें (देखें विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।

व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO

निवेश के कारण हैं ऐसे गंभीर आउटेज की लागत जो व्यवसाय के सहन से अधिक चले, ऐसे डेटा की हानि जिसे दोबारा बनाया नहीं जा सकता, और ग्राहकों, नियामकों और बीमाकर्ताओं के प्रति दायित्व जो तैयारी का प्रमाण माँगते हैं। निरंतरता का काम बीमा है, इसलिए प्रतिफल टाली गई हानि और निर्णय लेने वालों का भरोसा है, जिसे आँकड़ा गढ़े बिना आँकड़े के रूप में व्यक्त करना कठिन है। इसे उन पैटर्नों से वर्णित करें जो आप देख सकते हैं: बताए और प्रदर्शित बहाली के समय का अंतर, असली घटनाओं की जगह अभ्यासों में मिले उच्च-गंभीरता के निष्कर्षों की संख्या, और ग्राहक या ऑडिटर के प्रमाण के अनुरोध का उत्तर देने का समय।

लागतें तीन समूहों में आती हैं: उद्देश्यों की माँग का अतिरेक और औज़ार, अभ्यासों की योजना बनाने, चलाने और समीक्षा करने में लोगों का समय, और योजनाओं तथा निर्भरता के नक्शों को सामयिक रखने का प्रयास।

स्वामित्व की कुल लागत में लोग और कसे टियर हावी हैं। 24 घंटे के RTO से 2 घंटे के RTO पर जाना डिज़ाइन और बिल बदलता है, इसलिए व्यवसाय के साथ वह समझौता स्पष्ट करें। छोटे, बार-बार के स्वचालित परीक्षण एक बड़े वार्षिक आयोजन से सस्ते पड़ते हैं क्योंकि दोष तब सामने आते हैं जब उन्हें ठीक करना सस्ता है।

प्रतिरूप-विरोधी और जाल

  • शेल्फ़ पर रखी योजना। दस्तावेज़ तैयारी गिना जाता है, और किसी ने उसे आज़माया नहीं। इसके बजाय हर उद्देश्य के बगल में आख़िरी हाथ के परीक्षण की तिथि और परिणाम रिपोर्ट करें।
  • बैकअप की सफलता को बहाली की सफलता मानना। जॉब हरी रिपोर्ट करती हैं जबकि डेटा बहाल नहीं हो सकता। इसके बजाय नियमित रूप से बहालियाँ परखें और सफलता गिनने से पहले डेटा सत्यापित करें।
  • पूर्वाभ्यास किया रंगमंच। अभ्यास स्क्रिप्ट किया है और योजना के लेखक चलाते हैं। इसके बजाय आश्चर्य धीरे-धीरे जोड़ें।
  • सबके लिए एक लक्ष्य। हर सेवा का चार घंटे का RTO है क्योंकि टेम्पलेट ने कहा। इसके बजाय व्यावसायिक प्रभाव विश्लेषण से सेवाओं को टियर करें और ऐसे उद्देश्य तय करें जो फिट हों।
  • निष्कर्ष जो कभी बंद नहीं होते। अभ्यास की रिपोर्ट अंतर सूचीबद्ध करती है और बैकलॉग उन्हें कभी नहीं देखता। इसके बजाय हर निष्कर्ष को स्वामी और देय तिथि दें, और पुनः-परीक्षण से बंद होना सत्यापित करें।
  • विफल परीक्षण को दंडित करना। जिस टीम को छूटे RTO के लिए दोष दिया जाता है वह कठिन परीक्षण चलाना बंद कर देगी। इसके बजाय पहले से सहमत हों कि अच्छे निष्कर्षों वाला विफल अभ्यास अच्छा परिणाम है, और उसकी समीक्षा बिना दोष के करें।
  • तेज़ बदलाव के बाद बासी योजनाएँ। कैलेंडर समीक्षा चलाता है और आर्किटेक्चर के बदलाव फिसल जाते हैं। इसके बजाय योजना की समीक्षा को भौतिक बदलाव के रिकॉर्डों से जोड़ें और योजना की सामयिकता उनके विरुद्ध मापें।

परिपक्वता मॉडल

आयाम आरंभ विकास मानकीकरण प्रबंधन समन्वयन
उद्देश्य और टियर RTO और RPO अलिखित या टेम्पलेट से नकल किए कुछ प्रमुख सेवाओं के लिए उद्देश्य लिखे गए टियर और उद्देश्य व्यावसायिक प्रभाव विश्लेषण से आते हैं और सेवा रजिस्टर में हैं उद्देश्य प्रदर्शित परिणामों और आर्किटेक्चर के विरुद्ध समीक्षित उद्देश्य व्यवसाय और आपूर्तिकर्ताओं के साथ संयुक्त रूप से सहमत और सेवाओं के बदलने पर समायोजित
परीक्षण और प्रमाण बहाली कभी नहीं परखी, या घटना के बाद एक बार परखी कुछ टीमें तदर्थ बहाली के परीक्षण करती हैं; परिणाम निजी नोटों में दर्ज दायरे, समय-रेखा और परिणाम के साथ टियर के अनुसार परीक्षण के अंतराल परिणामों का रुझान, टेबलटॉप, ड्रिल और गेम डे अलग रिपोर्ट आश्चर्य के साथ टीमों और आपूर्तिकर्ताओं के पार अभ्यास, जोखिम से निर्धारित
निष्कर्ष और सीखना अंतर अनौपचारिक रूप से नोटिस होते हैं कुछ अभ्यासों के बाद निष्कर्ष सूचीबद्ध हर निष्कर्ष का स्वामी, गंभीरता और देय तिथि है बंद होने की दर और आयु की समीक्षा, पुनः-परीक्षण से बंद होने की पुष्टि निष्कर्ष साझा प्लैटफ़ॉर्मों, आपूर्तिकर्ता अनुबंधों और डिज़ाइन के मानकों को खिलाते हैं
योजना की सामयिकता योजनाएँ एक बार लिखी गईं घटनाओं के बाद योजनाएँ अद्यतन समीक्षा अंतराल के साथ संस्करण नियंत्रण में योजनाएँ समीक्षा भौतिक बदलावों से जुड़ी और मापी हुई योजनाओं और रनबुकों का कोड के रूप में परीक्षण और जहाँ संभव हो सेवा की परिभाषा से उत्पन्न

जाँच-सूची

  • हर टियर-1 सेवा का लिखित RTO और RPO है जो व्यावसायिक प्रभाव विश्लेषण से आया।
  • सेवा रजिस्टर हर सेवा का टियर, उद्देश्य और परीक्षण का अंतराल दिखाता है।
  • RTO और RPO की घड़ियाँ, स्वास्थ्य जाँच और अपवर्जन लिखे हैं (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)।
  • हाथ से बहाली के परीक्षण, टेबलटॉप और गेम डे अलग प्रकारों के रूप में रिपोर्ट होते हैं।
  • हर बहाली का परीक्षण डेटा का आकार, परिदृश्य, आश्चर्य का स्तर, और मापा बहाली का समय तथा डेटा की हानि दर्ज करता है।
  • बैकअप से बहालियाँ अपने-आप परखी जाती हैं, और डेटा सत्यापन की जाँच सफलता तय करती है।
  • हर अभ्यास के निष्कर्ष का स्वामी, गंभीरता, देय तिथि और बैकलॉग में जगह है।
  • योजना की समीक्षा भौतिक बदलाव के रिकॉर्डों से जुड़ी है, और सबसे पुरानी असमीक्षित योजना दिखाई देती है।
  • निर्भरता के नक्शे में साझा सेवाएँ शामिल हैं, और कम से कम एक परिदृश्य उनमें से एक को हटाता है।
  • इस विषय की हर मीट्रिक का मीट्रिक रजिस्टर में नामित सुरक्षा-रेखा और स्वामी है (देखें विषय 1.4, मीट्रिक्स का शासन और स्वामित्व)।
  • अभ्यास की ड्यूटी घूमती है, और उसमें लगा समय परिचालन भार गिना जाता है।

AI प्रॉम्प्ट

बहाली के परीक्षण और उसके साथ जाने वाले मापों की रचना करें।

I want to test recovery of [service name], a [tier] service with a stated RTO of
[RTO] and RPO of [RPO]. Its main components are [list: data stores, queues,
compute, shared services] and its suppliers are [list]. Draft a test plan with a
realistic scenario, the event that starts the clock, the health check that stops
it, how to measure data loss against the RPO, the data size to use, what to
record, and the safeguards to prevent harm to production. Do not invent
benchmark times or claim that any objective is achievable. List your assumptions
and the questions I should answer to finish the plan.

चापलूसी वाले प्रमाण के लिए अभ्यास की रिपोर्टों की समीक्षा करें।

Here are summaries of our last [number] recovery exercises: [paste for each:
type, date, scope, data size, restore time, data loss, findings count]. Our
objectives are [RTO and RPO per tier]. Identify where the reported results
could overstate real recovery capability, such as small datasets, scripted
scenarios, tabletop-only coverage, or loose health checks. Suggest what extra
information to record and which guardrail metrics to pair with each result. Do
not invent benchmark values or assume facts I have not given. List your
assumptions.

गेम डे के नोट्स को निष्कर्षों और बैकलॉग की मदों में बदलें।

Here are the raw notes from a game day on [service]: [paste notes and
timeline]. Extract each gap between the plan and what happened as a separate
finding with a short title, a description, a suggested severity using this scale
[severity scale], a candidate owner role (not a named person), and how we could
verify the fix. Group findings that may share a root cause. Do not invent events
that are not in the notes. List your assumptions and anything that needs
clarifying.

हाल के बदलाव के विरुद्ध योजना की सामयिकता जाँचें।

Here is the continuity plan for [service] last reviewed on [date]: [paste plan
or outline]. These are the material changes since then: [list changes to
architecture, data stores, dependencies, suppliers, and tooling]. Identify
steps, contacts, tools, and dependencies in the plan that the changes may have
made wrong, and list questions a reviewer should ask. Do not invent details
about our systems. List your assumptions.

AI स्किल

  • Service Management Metrics skill: निरंतरता, बहाली या अभ्यास की मीट्रिक को परिभाषित करने वाला विषय और उसके साथ जोड़ने की सुरक्षा-रेखा खोजने के लिए उपयोग करें।
  • Service Management Metrics maintainer skill: यह जाँचने के लिए उपयोग करें कि संपादित निरंतरता की मीट्रिक अपनी घड़ियाँ, अपवर्जन और गेमिंग का रास्ता बताती है।

मुख्य निष्कर्ष

  • बहाली का उद्देश्य वादा है, और केवल समयबद्ध, यथार्थवादी अभ्यास दिखाता है कि उसे निभाया जा सकता है या नहीं।
  • हर RTO और RPO के बगल में आख़िरी प्रदर्शित परिणाम और उसकी आयु रिपोर्ट करें, और हर अभ्यास अपनी पंक्ति में दिखाएँ।
  • बैकअप नहीं, बहालियाँ परखें: बहाली तभी गिनी जाती है जब डेटा उपयोग योग्य सत्यापित हो।
  • अभ्यास का उत्पाद निष्कर्षों की बंद सूची है, इसलिए उनकी आयु ट्रैक करें और पुनः-परीक्षण से बंद होना पुष्ट करें।
  • योजनाएँ संस्करण नियंत्रण में रखें और उनकी समीक्षा भौतिक बदलाव से जोड़ें, केवल कैलेंडर से नहीं।
  • सेवाओं और योजनाओं को मापें, लोगों को कभी नहीं, और अच्छे निष्कर्षों वाले विफल अभ्यास को सुरक्षित और सम्मानित परिणाम बनाएँ।

संदर्भ और आगे का अध्ययन

  1. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  2. Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018, https://sre.google/workbook/table-of-contents/
  3. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  4. ISO 22301:2019, Security and resilience: Business continuity management systems: Requirements, International Organization for Standardization.
  5. ISO 22313:2020, Security and resilience: Business continuity management systems: Guidance on the use of ISO 22301, International Organization for Standardization.
  6. Rosenthal, C., and Jones, N., Chaos Engineering: System Resiliency in Practice, O'Reilly Media, 2020.
  7. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  8. Wikipedia, Business continuity planning.
  9. Wikipedia, Recovery time objective.
  10. Wikipedia, Recovery point objective.
  11. Wikipedia, Business impact analysis.
  12. Wikipedia, ISO 22301.
  13. Wikipedia, Backup.
  14. Wikipedia, Chaos engineering.
  15. Wikipedia, Site reliability engineering.
  16. Wikipedia, Infrastructure as code.