ভূমিকা ও প্রেক্ষাপট

বেশিরভাগ ইনসিডেন্টের পরিমাপ সাধারণ খারাপ দিন বর্ণনা করে: একটি ব্যর্থ ডিপ্লয়মেন্ট, একটি সম্পৃক্ত ডেটাবেস, একটি কোলাহলপূর্ণ প্রতিবেশী। সেবা ধারাবাহিকতা বর্ণনা করে বিরল, গুরুতর দিন, যখন একটি অঞ্চল ব্যর্থ হয়, একটি ডেটা সংরক্ষণ নষ্ট হয়, একজন সরবরাহকারী উধাও হয়, বা র‍্যানসমওয়্যার পুরো ব্যবস্থা এনক্রিপ্ট করে। ব্যবসায়িক ধারাবাহিকতা পরিকল্পনা (business continuity planning) হলো একটি সংগঠনকে এমন ঘটনার মধ্য দিয়ে গ্রহণযোগ্য স্তরে সেবা দিয়ে যেতে প্রস্তুত করার শৃঙ্খলা। ITIL 4-এ চর্চাটির নাম সেবা ধারাবাহিকতা ব্যবস্থাপনা, এবং এটি সেই বৃহত্তর লক্ষ্যের আইটি সেবার দৃশ্য (সঙ্গী Service Management Guide-এর মিলে যাওয়া বিষয় দেখুন)।

দুটি শব্দ বেশিরভাগ ভার বহন করে। পুনরুদ্ধারের সময়ের লক্ষ্য (recovery time objective) (RTO) হলো একটি বিঘ্নের পর একটি সেবা পুনরুদ্ধারের গ্রহণযোগ্য সময়। পুনরুদ্ধারের বিন্দুর লক্ষ্য (recovery point objective) (RPO) হলো তথ্য হারানোর গ্রহণযোগ্য পরিমাণ, একটি সময়ের পরিসর হিসেবে প্রকাশিত: এক ঘণ্টার RPO মানে শেষ এক ঘণ্টার লেখা হারানো সহনীয় এবং বেশি হারানো নয়। দুটিই আসে একটি ব্যবসায়িক প্রভাব বিশ্লেষণ (business impact analysis) (BIA) থেকে, কোন কাজ সবচেয়ে গুরুত্বপূর্ণ, কী কীসের ওপর নির্ভর করে, এবং একটি বিঘ্নে কী খরচ হয় তা শনাক্ত করার পদ্ধতি। লক্ষ্যগুলো দামসহ ব্যবসায়িক সিদ্ধান্ত, কারণ কঠোরতর লক্ষ্যের জন্য আরও রিডান্ডেন্সি, আরও স্বয়ংক্রিয়করণ এবং আরও মহড়ার সময় লাগে।

সমস্যা হলো একটি লক্ষ্য একটি ভবিষ্যৎ ঘটনা সম্পর্কে একটি প্রতিশ্রুতি যা এখনও ঘটেনি। সৎ প্রমাণ একটি পরীক্ষা। সর্বশেষ মহড়ায় দল কি RTO-র মধ্যে সেবা পুনরুদ্ধার করেছিল? পুনরুদ্ধার হওয়া তথ্য কি RPO পূরণ করেছিল? পরিকল্পনার ধাপগুলো কি দল যা সত্যিই নিয়েছিল সেই ধাপ ছিল? একটি ধারাবাহিকতার মেট্রিক তাই বেশিরভাগ মহড়ার পরিমাপ, এবং পরিমাপের গুণমান নির্ভর করে মহড়া কতটা বাস্তবসম্মত ছিল তার ওপর।

এজাইল ও সাইট রিলায়েবিলিটি ইঞ্জিনিয়ারিং (SRE) দল এতে দরকারি অভ্যাস আনে। তাদের ব্যবস্থা সাপ্তাহিক বদলায়, তাই একবার লিখে ফাইল করা পরিকল্পনা মাসের মধ্যে বাসি হয়ে যায়। এজাইল সাড়া হলো পুনরুদ্ধারকে কোড হিসেবে রাখা (যেমন কোড হিসেবে অবকাঠামো (infrastructure as code) দিয়ে), ঘন ঘন মহড়া দেওয়া এবং প্রতিটি মহড়াকে ব্যাকলগ আইটেমের উৎস ধরা। কেওস ইঞ্জিনিয়ারিং (chaos engineering) ও গেম ডে একই ধারণা ছোট পরিসরে প্রয়োগ করে: ইচ্ছে করে একটি নিয়ন্ত্রিত উপায়ে একটি ব্যর্থতা ঘটান এবং কী হয় দেখুন। SRE দৃষ্টিভঙ্গি Google-এর Site Reliability Engineering বইয়ে বর্ণিত, এবং বিস্তৃত ক্ষেত্র সাইট রিলায়েবিলিটি ইঞ্জিনিয়ারিং (site reliability engineering) নিবন্ধে সংক্ষেপিত।

দৃষ্টিভঙ্গি কীভাবে আলাদা

  • ITIL দৃষ্টিভঙ্গি। সেবা ধারাবাহিকতা ব্যবস্থাপনা এমন একটি চর্চা যা BIA থেকে পুনরুদ্ধারের লক্ষ্য ঠিক করে, পরিকল্পনা নকশা করে এবং পরীক্ষা দিয়ে তা প্রমাণ করে। এর ফল হলো পরিকল্পনা, মহড়ার প্রতিবেদন এবং লিপিবদ্ধ আবিষ্কার। ISO 22301 মান একটি ব্যবসায়িক ধারাবাহিকতা ব্যবস্থাপনা ব্যবস্থা বর্ণনা করে। অক্টোবর ২০২৬ অনুযায়ী, কোনো গ্রাহক বা নিয়ন্ত্রক সম্মতি দাবি করলে সর্বশেষ সংস্করণ সরাসরি যাচাই করুন।
  • এজাইল দৃষ্টিভঙ্গি। পুনরুদ্ধারের সক্ষমতা সম্পন্নের সংজ্ঞায় একটি পণ্যের বৈশিষ্ট্য। যে স্টোরি একটি ডেটা সংরক্ষণ যোগ করে তা সম্পন্ন নয় যতক্ষণ না তার পুনরুদ্ধারের পথ চেষ্টা করা হয়েছে।
  • SRE দৃষ্টিভঙ্গি। নির্ভরযোগ্যতার কাজ বাজেটভুক্ত ও মাপা। ফেইলওভার, পুনরুদ্ধারের মহড়া ও গেম ডে মালিকসহ নির্ধারিত কাজ এবং ব্যাকলগে ঢোকা আবিষ্কার।

এই বিষয় সাতটি পরিমাপ ঢাকে: পরীক্ষায় সময় ও তথ্যের লক্ষ্যের বিপরীতে পুনরুদ্ধার, মহড়ার আচ্ছাদন ও সাম্প্রতিকতা, ব্যাকআপ থেকে পুনরুদ্ধার, আবিষ্কার বন্ধ করা এবং পরিকল্পনার সাময়িকতা। প্রকৃত বিভ্রাট বড় ইনসিডেন্টের মেট্রিকে (বিষয় 3.4, বড় ইনসিডেন্টের মেট্রিক দেখুন) এবং প্রাপ্যতার মেট্রিকে (বিষয় 5.3, প্রাপ্যতার মেট্রিক দেখুন)। ব্যবহারকারী-মুখী লক্ষ্য হিসেবে প্রকাশিত উদ্দেশ্য সূচক ও বাজেটের বিষয়ে আছে (বিষয় 5.2, SLI, SLO ও ত্রুটির বাজেট দেখুন)। DORA গবেষণা কর্মসূচির "ব্যর্থ ডিপ্লয়মেন্ট থেকে পুনরুদ্ধারের সময়" অনেক ছোট একটি ঘড়ি (বিষয় 2.8, DORA মেট্রিক দেখুন)। পরীক্ষায় প্রকাশিত মূল কারণ সমস্যা ও শেখার বিষয়ের (বিষয় 4.1, সমস্যা ব্যবস্থাপনার মেট্রিক এবং বিষয় 4.2, পোস্টমর্টেম ও শিক্ষণের মেট্রিক দেখুন)।

একটি স্তর (tier) হলো সেবা কত দ্রুত ফিরতে হবে সেই অনুযায়ী গোষ্ঠীবদ্ধ সেবার একটি শ্রেণি। একটি টেবিলটপ মহড়া (tabletop exercise) হলো ব্যবস্থায় কোনো পরিবর্তন ছাড়া আলোচনা-ভিত্তিক একটি মহড়া। একটি গেম ডে (game day) হলো হাতে-কলমে মহড়া যেখানে একটি দল একটি ব্যর্থতা ঘটায় বা অনুকরণ করে এবং সাড়া পর্যবেক্ষণ করে। একটি আবিষ্কার (finding) হলো পরিকল্পনা ও যা ঘটেছিল তার মধ্যে লিপিবদ্ধ ফাঁক। পরিকল্পনার সাময়িকতা হলো একটি পরিকল্পনা সেবা আজ যেমন আছে তা কতটা প্রতিফলিত করে।

মূল নীতি

  • আগে পরীক্ষা করুন, তারপর দাবি করুন। একটি RTO বা RPO কেবল প্রকৃতপক্ষে সম্পন্ন ও সময় মাপা একটি পুনরুদ্ধার দিয়ে যাচাই হয়। লক্ষ্য ও সর্বশেষ প্রদর্শিত ফল পাশাপাশি প্রতিবেদন করুন।
  • শুধু সাফল্য নয়, বাস্তবতা মাপুন। একটি খালি পরীক্ষার ডেটাবেসের মিনিটে পাস করা পুনরুদ্ধার একটি প্রোডাকশন-আকারের পুনরুদ্ধার সম্পর্কে সামান্যই বলে। ফলের পাশে প্রতিটি মহড়ার পরিধি ও শর্ত লিপিবদ্ধ করুন।
  • ব্যবস্থাকে স্তর দিন এবং স্তর অনুযায়ী শ্রম দিন। জটিল সেবা ঘন ঘন, বাস্তবসম্মত পরীক্ষা পায়। নিম্ন-স্তরের সেবা হালকা যাচাই পায়। সবকিছুর জন্য একটি ঘনত্বের লক্ষ্য শ্রম নষ্ট করে বা ঝুঁকি ফসকায়।
  • আবিষ্কারকে মহড়ার ফল ভাবুন। একটি গেম ডের মূল্যবান ফল হলো ফাঁকের একটি বন্ধ তালিকা। কোনো আবিষ্কার ছাড়া একটি পরীক্ষা হয় চমৎকার নয় অতি নরম, এবং কোনটি তা জানা উচিত।
  • সেবা ও ঘূর্ণন বর্ণনা করুন, কখনও ব্যক্তি নয়। মহড়ার ফল ব্যবস্থা ও পরিকল্পনা বর্ণনা করে। একটি মহড়া কে কত দ্রুত পুনরুদ্ধার করেছে সেই অনুযায়ী কাউকে ক্রম দেওয়া হয় না।
  • প্রতিটি মহড়াকে নিজস্ব সারি হিসেবে দেখান। প্রতি সেবায় বছরে অল্প পরীক্ষা হয়, তাই গড় বিভ্রান্ত করে (বিষয় 1.6, সেবা মেট্রিকের জন্য পরিসংখ্যান-সাক্ষরতা দেখুন)।

মেট্রিকের সংজ্ঞা

প্রতিটি মেট্রিক ঘড়ি বা গণনা, কী বাদ, এবং তথ্যের উৎস তালিকা করে। বিশ্বাসের আগে প্রতিটি সারির একটি লিখিত নিয়ম দরকার। নিচে একটি "স্তর-১ সেবা" মানে আপনার নিজস্ব BIA-তে সংজ্ঞায়িত সর্বোচ্চ পুনরুদ্ধার স্তরের একটি সেবা।

মেট্রিক সংজ্ঞা সূত্র একক তথ্যের উৎস ITIL চর্চা এজাইল সমতুল্য পর্যায়কাল
RTO পূরণের হার যে পুনরুদ্ধার মহড়ায় সেবা তার ঘোষিত RTO-র মধ্যে পুনরুদ্ধার হয়েছে তার অংশ পুনরুদ্ধারের সময় <= RTO সহ মহড়া / সম্পন্ন মহড়া। ঘড়ি মহড়ার ব্যর্থতার ঘোষিত শুরুতে (প্রবেশের সময় বা পরিস্থিতির ঘোষণা) শুরু হয় এবং সেবা প্রকৃত বা সিনথেটিক ব্যবহারকারীদের জন্য সম্মত স্বাস্থ্য যাচাই পাস করলে থামে। টেবিলটপ মহড়া এবং সময় মাপা পুনরুদ্ধারহীন মহড়া বাদ ও আলাদাভাবে গোনা শতাংশ, মহড়ার সংখ্যাসহ মহড়ার প্রতিবেদন, পর্যবেক্ষণ থেকে সময়রেখা, RTO-সহ সেবার নিবন্ধন সেবা ধারাবাহিকতা ব্যবস্থাপনা; প্রাপ্যতা ব্যবস্থাপনা গেম ডের ফল; ডেলিভারি মেট্রিকে পুনরুদ্ধারের সময় প্রতি মহড়ায়; ত্রৈমাসিক সমষ্টি
RPO পূরণের হার যে পুনরুদ্ধার মহড়ায় তথ্য হারানো ঘোষিত RPO-র মধ্যে ছিল তার অংশ মাপা তথ্য হারানোর পরিসর <= RPO সহ মহড়া / তথ্য পুনরুদ্ধার করা মহড়া। তথ্য হারানোর পরিসর হলো পুনরুদ্ধারের পর উপস্থিত শেষ লেখা এবং ব্যর্থতার মুহূর্তের মধ্যবর্তী সময়। কোনো অবস্থা পুনরুদ্ধার না করা মহড়া বাদ শতাংশ, মহড়ার সংখ্যাসহ মহড়ার প্রতিবেদন, উৎস বা লেখার লগের সঙ্গে পুনরুদ্ধার করা তথ্যের তুলনা সেবা ধারাবাহিকতা ব্যবস্থাপনা; তথ্য নিরাপত্তা ব্যবস্থাপনা সম্পন্নের সংজ্ঞার অংশ হিসেবে পুনরুদ্ধারের মহড়া প্রতি মহড়ায়; ত্রৈমাসিক সমষ্টি
পরীক্ষিত পুনরুদ্ধারের আচ্ছাদন যে স্তর-১ ও স্তর-২ সেবার তাদের সম্মত পরীক্ষার ব্যবধানের মধ্যে একটি হাতে-কলমে পুনরুদ্ধারের পরীক্ষা হয়েছে তার অংশ ব্যবধানের মধ্যে একটি যোগ্য পরীক্ষাসহ সেবা / পরিধির সেবা। একটি যোগ্য পরীক্ষা হাতে-কলমে (শুধু টেবিলটপ নয়) এবং পরীক্ষা বা প্রোডাকশন পরিবেশে সেবা পুনরুদ্ধার করে। ব্যবধান প্রতি স্তরে ঠিক করা স্তর অনুযায়ী শতাংশ সেবার নিবন্ধন, মহড়ার ক্যালেন্ডার ও প্রতিবেদন সেবা ধারাবাহিকতা ব্যবস্থাপনা; সেবা ক্যাটালগ ব্যবস্থাপনা গেম ডের সূচি মাসিক
শেষ সফল পুনরুদ্ধার পরীক্ষার পর থেকে দিন প্রতিটি জটিল সেবার জন্য সর্বশেষ পাস করা পুনরুদ্ধার পরীক্ষার বয়স প্রতিবেদনের তারিখ বিয়োগ RTO ও RPO দুটিই পূরণ করা সর্বশেষ পরীক্ষার তারিখ। একটি ব্যর্থ পরীক্ষা ঘড়ি রিসেট করে না। কখনও পরীক্ষা না হওয়া সেবা শূন্য নয়, "কখনও নয়" হিসেবে দেখানো প্রতি সেবায় দিন, সবচেয়ে পুরোনোটি হাইলাইট করা মহড়ার প্রতিবেদন, সেবার নিবন্ধন সেবা ধারাবাহিকতা ব্যবস্থাপনা গেম ডের সূচি; কাজের আইটেমের বয়স মাসিক
ব্যাকআপ থেকে পুনরুদ্ধারের সাফল্যের হার চেষ্টা করা ব্যাকআপ-থেকে-পুনরুদ্ধারের যে অংশ যাচাই করা, ব্যবহারযোগ্য তথ্যসহ সম্পন্ন হয়েছে স্বয়ংক্রিয় ও ম্যানুয়াল পুনরুদ্ধারের পরীক্ষা জুড়ে সম্পন্ন ও তথ্য যাচাইয়ে পাস করা পুনরুদ্ধার / চেষ্টা করা পুনরুদ্ধার। শুধু ব্যাকআপ কাজের সাফল্য বাদ, কারণ চলা কাজ মানে কাজ করা পুনরুদ্ধার নয় তথ্যের স্তর অনুযায়ী শতাংশ ব্যাকআপ ব্যবস্থার লগ, স্বয়ংক্রিয় পুনরুদ্ধার যাচাইয়ের ফল সেবা ধারাবাহিকতা ব্যবস্থাপনা; অবকাঠামো ও প্ল্যাটফর্ম ব্যবস্থাপনা পুনরুদ্ধারের মহড়া; সম্পন্নের সংজ্ঞায় পরিচালনযোগ্যতার মানদণ্ড স্বয়ংক্রিয় পরীক্ষার জন্য সাপ্তাহিক; পর্যালোচনায় মাসিক
মহড়ার আবিষ্কার বন্ধের হার পুনরুদ্ধারের মহড়ার যে আবিষ্কার তাদের সম্মত সময়ের মধ্যে বন্ধ হয়েছে তার অংশ, তীব্রতা অনুযায়ী ভাগ সময়ের মধ্যে বন্ধ আবিষ্কার / সময়কালে পাওনা হওয়া আবিষ্কার। ঘড়ি মহড়ার প্রতিবেদনে আবিষ্কার লিপিবদ্ধ হলে শুরু এবং যাচাই করা সংশোধনে থামে, অর্থাৎ একটি পুনঃপরীক্ষা বা পর্যালোচনা যা তা নিশ্চিত করে। একজন নামযুক্ত মালিক ঝুঁকি হিসেবে গ্রহণ করা আবিষ্কার আলাদাভাবে গোনা শতাংশ, বিলম্বিত আবিষ্কারের গণনাসহ মহড়ার প্রতিবেদন, ইস্যু ট্র্যাকার সেবা ধারাবাহিকতা ব্যবস্থাপনা; নিরন্তর উন্নয়ন রেট্রোস্পেকটিভের পদক্ষেপ; ব্যাকলগ আইটেমের বয়স মাসিক
পরিকল্পনার সাময়িকতা তাদের সেবার সর্বশেষ বস্তুগত পরিবর্তনের পর, বা তাদের পর্যালোচনার ব্যবধানের মধ্যে, পর্যালোচিত ধারাবাহিকতার পরিকল্পনা ও রানবুকের অংশ সর্বশেষ বস্তুগত পরিবর্তনের পরের এবং ব্যবধানের ভেতরের পর্যালোচনার তারিখসহ পরিকল্পনা / পরিধির পরিকল্পনা। বস্তুগত পরিবর্তন মানে স্থাপত্য, ডেটা সংরক্ষণ, নির্ভরতা বা সরবরাহকারী বদলানো বলে চিহ্নিত একটি পরিবর্তনের রেকর্ড শতাংশ, সবচেয়ে পুরোনো অপর্যালোচিত পরিকল্পনার বয়সসহ পরিকল্পনার রিপোজিটরি (সংস্করণ নিয়ন্ত্রণ), পরিবর্তনের রেকর্ড, সেবার নিবন্ধন সেবা ধারাবাহিকতা ব্যবস্থাপনা; পরিবর্তন সক্ষমকরণ সম্পন্নের সংজ্ঞায় রানবুক হালনাগাদ অন্তর্ভুক্ত ত্রৈমাসিক

একটি মহড়ায় RTO-র ঘড়ি একটি প্রকৃত বিভ্রাটের ঘড়ি থেকে আলাদা, যা প্রভাবে শুরু হয় (বিষয় 3.4, বড় ইনসিডেন্টের মেট্রিক দেখুন), তাই মহড়াকে মহড়ার সঙ্গে তুলনা করুন। একটি ঘনিষ্ঠভাবে স্ক্রিপ্ট করা মহড়া মহড়ার গতি মাপে, তাই তাতে কতটা চমক ছিল লিপিবদ্ধ করুন।

সুপারিশ

পরীক্ষা করা যায় এমন লক্ষ্য ঠিক করুন

1. একটি ব্যবসায়িক প্রভাব বিশ্লেষণ থেকে RTO ও RPO নির্গত করুন, এবং সেবার পাশে লিখুন। BIA ব্যবসাকে জিজ্ঞাসা করে এক ঘণ্টা, এক দিন ও এক সপ্তাহের বিভ্রাটের খরচ কত এবং কত তথ্য হারানো সইতে পারে। উত্তর সেবার নিবন্ধনে লিপিবদ্ধ করুন যাতে প্রতিটি পরীক্ষা একটি ঘোষিত লক্ষ্যের সঙ্গে তুলনা করা যায়। একা প্রকৌশলীদের বাছা লক্ষ্য হয় অতি ব্যয়বহুল বা গ্রাহকদের প্রয়োজনের সঙ্গে সম্পর্কহীন হয়।

2. সেবাকে স্তর দিন এবং স্তর অনুযায়ী পরীক্ষার ব্যবধান ঠিক করুন। অল্প সংখ্যক স্তর, হয়তো তিন বা চারটি, প্রতিটি সেবার জন্য আলাদা নিয়মের চেয়ে চালানো সহজ। শীর্ষ স্তরকে সবচেয়ে ঘন ঘন ও বাস্তবসম্মত পরীক্ষা দিন, এবং সর্বনিম্ন স্তরকে একটি নমুনার পর্যায়ক্রমিক পুনরুদ্ধারের মতো একটি হালকা যাচাই দিন। ব্যবধান লিখে রাখুন এবং BIA বদলালে পর্যালোচনা করুন।

3. লক্ষ্য স্থাপত্যের সঙ্গে খাপ খায় কি না যাচাই করুন। রাতের ব্যাকআপসহ পাঁচ মিনিটের RPO একটি স্ববিরোধিতা যা একটি পরীক্ষা সবচেয়ে খারাপ মুহূর্তে প্রকাশ করবে। প্রথম মহড়ার আগে প্রতিটি লক্ষ্য ব্যাকআপ, প্রতিলিপি ও ফেইলওভারের নকশার সঙ্গে তুলনা করুন, এবং যেকোনো ফাঁক একটি আবিষ্কার হিসেবে লিপিবদ্ধ করুন।

এমনভাবে পরীক্ষা করুন যা কিছু প্রকাশ করে

4. টেবিলটপ, পুনরুদ্ধারের মহড়া এবং গেম ডে মেশান। একটি টেবিলটপ মহড়া সস্তা এবং ভূমিকা, যোগাযোগ ও সিদ্ধান্তের ফাঁক খুঁজে পায়। একটি হাতে-কলমে পুনরুদ্ধারের মহড়া পদ্ধতি, অনুমতি ও তথ্যের ফাঁক খুঁজে পায়। একটি গেম ডে, যা একটি ব্যর্থতা ঘটায় এবং সাড়া দেখে, পর্যবেক্ষণ, রানবুক ও সমন্বয়ের ফাঁক খুঁজে পায়। প্রতিটি ধরন আলাদাভাবে প্রতিবেদন করুন যাতে সহজ টেবিলটপের সারি পুনরুদ্ধারের প্রমাণ মনে না হয়।

5. প্রোডাকশন-আকারের তথ্যে পুনরুদ্ধারের সময় মাপুন। একটি ছোট কপিতে কাজ করা পুনরুদ্ধার থ্রুপুট বা সংরক্ষণের সীমার কারণে প্রকৃত পরিমাণে ব্যর্থ হতে পারে। যেখানে পূর্ণ-পরিসরের পরীক্ষা ঘন ঘন চালানো অতি ব্যয়বহুল, সেখানে পর্যায়ক্রমে একটি চালান এবং যেকোনো অনুমান বলুন। ফলের সঙ্গে তথ্যের আকার লিপিবদ্ধ করুন।

6. যাচাই করুন পুনরুদ্ধার করা তথ্য ব্যবহারযোগ্য। পুনরুদ্ধারের পর একটি স্বয়ংক্রিয় যাচাই যোগ করুন, যেমন একটি সারির গণনা, একটি চেকসাম বা একটি সিনথেটিক লেনদেন। একটি পুনরুদ্ধারকে কেবল তখনই সফল গণনা করুন যখন সেই যাচাই পাস করে।

7. ধীরে ধীরে চমক যোগ করুন। প্রাথমিক মহড়া ঘোষিত ও স্ক্রিপ্ট করা হতে পারে। পরেরগুলো ব্যর্থতার বিবরণ গোপন রাখা উচিত এবং মেয়াদোত্তীর্ণ শংসাপত্র বা পৌঁছানো যায় না এমন সরবরাহকারীর মতো নির্ভরতা অন্তর্ভুক্ত করা উচিত। চমকের স্তর লিপিবদ্ধ করুন যাতে ফল প্রেক্ষাপটে পড়া যায়।

আবিষ্কারকে পরিবর্তনে পরিণত করুন

8. প্রতিটি আবিষ্কার একজন মালিক, একটি তীব্রতা ও একটি নির্ধারিত তারিখসহ লগ করুন। একটি গেম ডে একটি তালিকা তৈরি করে: একটি অনুপস্থিত অনুমতি, টুলের সঙ্গে আর না মেলা একটি রানবুক ধাপ, কখনও না বাজা একটি মনিটর। প্রতিটি দলের ব্যাকলগে ফিচারের কাজের একই দৃশ্যমানতায় রাখুন। খোলা আবিষ্কারের বয়স এবং সময়মতো বন্ধ হওয়া অংশ ট্র্যাক করুন, এবং যেখানে ব্যবহারিক পুনঃপরীক্ষা দিয়ে বন্ধ নিশ্চিত করুন।

9. আবিষ্কারকে সমস্যা ব্যবস্থাপনা ও শেখার সঙ্গে যুক্ত করুন। মহড়ায় মহড়ায় ফিরে আসা একটি আবিষ্কার ITIL অর্থে একটি সমস্যা (বিষয় 4.1, সমস্যা ব্যবস্থাপনার মেট্রিক দেখুন)। একটি পোস্টমর্টেমের মতো প্রতিটি মহড়া দোষারোপহীনভাবে পর্যালোচনা করুন এবং পদক্ষেপ বন্ধ পর্যন্ত ট্র্যাক করুন (বিষয় 4.2, পোস্টমর্টেম ও শিক্ষণের মেট্রিক দেখুন)।

পরিকল্পনা জীবন্ত রাখুন

10. পরিকল্পনা ও রানবুক সংস্করণ নিয়ন্ত্রণে রাখুন এবং পরিবর্তনের সঙ্গে যুক্ত করুন। একটি পরিবর্তনের রেকর্ড স্থাপত্য, একটি ডেটা সংরক্ষণ বা একটি সরবরাহকারী বদলালে একই কাজে মালিক পরিকল্পনা পর্যালোচনা হওয়া দাবি করুন (বিষয় 4.3, পরিবর্তন সক্ষমকরণের মেট্রিক দেখুন)। শুধু ক্যালেন্ডারের বিপরীতে নয়, সর্বশেষ বস্তুগত পরিবর্তনের বিপরীতে পরিকল্পনার সাময়িকতা মাপুন। প্রতি ত্রৈমাসিকে পর্যালোচিত অথচ গত মাসের স্থানান্তর উপেক্ষা করা একটি পরিকল্পনা নামে সাময়িক।

11. নির্ভরতার মানচিত্র সৎ রাখুন। পুনরুদ্ধারের ক্রম পরিচয়, নাম সমাধান ও গোপন তথ্য সংরক্ষণের মতো ভাগ করা সেবার ওপর নির্ভর করে। কনফিগারেশনের রেকর্ডের বিপরীতে মানচিত্র মেলান এবং মহড়া যে ফাঁক প্রকাশ করে তা ঠিক করুন (বিষয় 7.4, কনফিগারেশন ও CMDB মানের মেট্রিক দেখুন)।

12. সরবরাহকারীদের অন্তর্ভুক্ত করুন, এবং মহড়ার দায়িত্ব ঘোরান। প্রতিটি জটিল সরবরাহকারীর কাছে তাদের নিজস্ব পরীক্ষার প্রমাণ চান এবং যৌথ ধাপের মহড়া কীভাবে দেবেন তাতে একমত হোন (বিষয় 8.4, সরবরাহকারী ও চুক্তির মেট্রিক দেখুন)। মহড়ায় সময় লাগে, তাই দায়িত্ব একটি ঘূর্ণনে ভাগ করুন এবং পরিচালনার ভার হিসেবে গুনুন (বিষয় 5.7, একঘেয়ে কাজ ও অন-কলের মেট্রিক দেখুন)।

কারসাজির উপায় ও রক্ষাবেষ্টনী

ধারাবাহিকতার সংখ্যা তোষামোদ করা সহজ কারণ কম মানুষ একটি মহড়া ঘনিষ্ঠভাবে দেখে, এবং প্রকৃত পরীক্ষা কদাচিৎ ঘটে। সারণি প্রতিটি মেট্রিককে তাতে কারসাজির একটি উপায় এবং তা ধরা যাচাইয়ের সঙ্গে জোড় বাঁধে। জোড়গুলো বিষয় 1.2-এ বলা রূপ অনুসরণ করে (বিষয় 1.2, গুডহার্টের সূত্র ও মেট্রিকের মনস্তত্ত্ব দেখুন)।

মেট্রিক যেভাবে কারসাজি হয় জোড়া রক্ষাবেষ্টনী মেট্রিক বা চর্চা
RTO পূরণের হার ছোট পরীক্ষার ডেটাসেট, সহজ পরিস্থিতি বা মহড়া করা স্ক্রিপ্ট বাছা; দল শুরু করার পর দেরিতে ঘড়ি শুরু; "পুনরুদ্ধার" আগে আসতে স্বাস্থ্য যাচাই শিথিল করা; প্রতিটি পরীক্ষা পাস করতে উদার RTO ঠিক করা প্রতিটি ফলের সঙ্গে তথ্যের আকার, পরিস্থিতির চমক ও স্বাস্থ্য যাচাইয়ের সংজ্ঞা লিপিবদ্ধ; BIA-র সঙ্গে RTO তুলনা; ব্যর্থতাসহ প্রতিটি মহড়া নিজস্ব সারিতে দেখানো
RPO পূরণের হার সব অবস্থার জন্য নয়, শুধু প্রাথমিক সারণির জন্য ক্ষতি মাপা; কোনো ভার চলছে না বলে সিঙ্কে থাকা একটি রেপ্লিকা পরীক্ষা করা; ফসকানো ফলের পর RPO পুনঃসংজ্ঞায়িত করা পরিধির সব ডেটা সংরক্ষণ জুড়ে লেখার লগের বিপরীতে তথ্য হারানো যাচাই; বাস্তবসম্মত লেখার ভারে পরীক্ষা; কারণসহ লক্ষ্যের পরিবর্তনের লগ রাখা
পরীক্ষিত পুনরুদ্ধারের আচ্ছাদন টেবিলটপ আলোচনাকে পরীক্ষা গোনা; শতাংশ বাড়াতে একটি তুচ্ছ ছোট সেবা পরীক্ষা করা; সেবাকে নিম্ন স্তরে পুনঃশ্রেণিবদ্ধ করে পরিধির তালিকা ছোট করা স্তর-১ গণনার জন্য হাতে-কলমে পরীক্ষা দাবি; সেবার জটিলতা দিয়ে ভারিত আচ্ছাদন প্রতিবেদন; BIA-র বিপরীতে স্তরের পরিবর্তন নিরীক্ষা
শেষ সফল পুনরুদ্ধার পরীক্ষার পর থেকে দিন বয়স রিসেট করতে একটি সহজ পরীক্ষা আবার চালানো; একটি আংশিক পরীক্ষা পাস লেবেল করা; কাগজে পর্যালোচনার পর তারিখ রিসেট করা সর্বশেষ পাস করা পরীক্ষার পরিধি দেখানো; সবচেয়ে পুরোনো বয়স ও কখনও পরীক্ষা না হওয়া সেবা দেখানো; RTO ও RPO দুটিই পূরণ হওয়া দাবি
ব্যাকআপ থেকে পুনরুদ্ধারের সাফল্যের হার ব্যাকআপ কাজের সাফল্যকে পুনরুদ্ধারের সাফল্য প্রতিবেদন; শুধু ভালো জানা ব্যাকআপ পরীক্ষা করা; ব্যর্থ হতে পারে না এমন যাচাই দিয়ে যাচাই করা এলোমেলোভাবে নমুনা-করা ব্যাকআপের পুনরুদ্ধার ট্র্যাক; তথ্য যাচাইয়ের ফল দাবি; প্রতিটি নিরীক্ষায় যাচাই নিজেরই পর্যালোচনা
মহড়ার আবিষ্কার বন্ধের হার সংশোধন ছাড়া আবিষ্কার বন্ধ করা; নির্ধারিত তারিখ শিথিল করতে তীব্রতা নামানো; একটি আবিষ্কারকে অনেক সহজ আবিষ্কারে ভাঙা; প্রথমেই কম আবিষ্কার লিপিবদ্ধ করা পুনঃপরীক্ষা দিয়ে বন্ধ যাচাই; বন্ধের হারের পাশে প্রতি মহড়ায় আবিষ্কার প্রতিবেদন, কারণ কমতে থাকা গণনা নরমতর মহড়া বোঝাতে পারে; তীব্রতার পরিবর্তন পর্যালোচনা
পরিকল্পনার সাময়িকতা পরিকল্পনা না পড়ে পর্যালোচনার তারিখ হালনাগাদ; পরিবর্তন অ-বস্তুগত চিহ্নিত করা; কখনও বাসি না হওয়া সাধারণ পাঠ দিয়ে পরিকল্পনা ঠাসা পরিকল্পনার নমুনা নিয়ে যিনি লেখেননি তাঁর সঙ্গে সেগুলো ধাপে ধাপে দেখা; স্থাপত্য পরিবর্তনের ইতিহাসের সঙ্গে বস্তুগত পরিবর্তনের চিহ্ন দেওয়ার হার তুলনা; সাময়িকতাকে পরীক্ষার ফলের সঙ্গে যুক্ত করা

একটি সুস্থ পাঠ দেখায় প্রতি ত্রৈমাসিকে মুষ্টিমেয় পরীক্ষা সৎ তারতম্যসহ: কিছু প্রথম চেষ্টায় পাস, কিছু ব্যর্থ ও পুনরাবৃত্ত, এবং প্রতিটি থেকে আবিষ্কার ব্যাকলগে দেখা দেয় ও ঘোষিত সময়ে বন্ধ হয়। বছরের পর বছর নিখুঁত স্কোর জিজ্ঞাসা করার কারণ মহড়া কতটা কঠিন।

ভারসাম্য: সুবিধা ও অসুবিধা

পদ্ধতি শক্তি দুর্বলতা
ঘন ঘন ছোট স্বয়ংক্রিয় পুনরুদ্ধার পরীক্ষা সস্তা, নিরন্তর প্রমাণ; নীরব ব্যাকআপ ব্যর্থতা আগে ধরে সমন্বয়, মানুষ বা পূর্ণ-পরিসরের পুনরুদ্ধার পরীক্ষা করে না
বার্ষিক পূর্ণ-পরিসরের ফেইলওভার মহড়া বাস্তবসম্মত; মানুষ, সরবরাহকারী ও নির্ভরতা একসঙ্গে পরীক্ষা করে ব্যয়বহুল ও বিরল; সংশোধনের পর পুনরাবৃত্তি কঠিন; প্রোডাকশনে চালালে ঝুঁকি আছে
টেবিলটপ মহড়া কম খরচ; ভূমিকা ও সিদ্ধান্তের ফাঁক খুঁজে পায়; প্রশিক্ষণের জন্য ভালো প্রযুক্তি কাজ করে প্রমাণ করে না; কিছু না শিখেই চালানো সহজ
ইচ্ছাকৃত ব্যর্থতাসহ প্রোডাকশন গেম ডে সর্বোচ্চ বাস্তবতা; পর্যবেক্ষণ ও রানবুক যেমন আছে তেমন পরীক্ষা করে পরিণত সুরক্ষা ও নেতৃত্বের সমর্থন লাগে; অসতর্কভাবে চালালে গ্রাহকের ক্ষতি হতে পারে
স্তরযুক্ত লক্ষ্য ঝুঁকি যেখানে সেখানে শ্রম দেয় স্তর বরাদ্দ সরে যেতে পারে এবং একজন মালিক লাগে

ব্যবহারিক উত্তর হলো একটি স্তরযুক্ত কর্মসূচি: সবসময় সস্তা স্বয়ংক্রিয় পুনরুদ্ধারের যাচাই, প্রতিটি স্তর-১ সেবার জন্য একটি নির্দিষ্ট ব্যবধানে হাতে-কলমে মহড়া, একটি দীর্ঘতর চক্রে একটি বড় মহড়া, এবং সিদ্ধান্ত ও যোগাযোগের জন্য টেবিলটপ। ব্যবধান বলুন যাতে পাঠক প্রমাণ কতটা সাম্প্রতিক বিচার করতে পারে।

দলের সঙ্গে আলোচনার প্রশ্ন

1. আমরা সর্বশেষ কখন আমাদের সবচেয়ে গুরুত্বপূর্ণ সেবা পুনরুদ্ধার করেছি, এবং ঠিক কী প্রমাণ করেছি? তারিখ, তথ্যের আকার, পরিস্থিতি ও ফল চান এবং একটি বোর্ডে লিখুন। সঞ্চালক বিচার না করে দাবি ও প্রমাণের ফাঁকে মনোযোগ দিন। সবচেয়ে বড় ফাঁক বন্ধ করবে এমন একটি পরীক্ষায় একমত হয়ে শেষ করুন।

2. আমাদের RTO ও RPO কে বেছেছে, এবং ব্যবসা কি আজও সেগুলো বাছত? প্রতিটি লক্ষ্য একটি ব্যবসায়িক প্রভাব বিশ্লেষণ বা একটি সিদ্ধান্ত পর্যন্ত অনুসরণ করুন। জিজ্ঞাসা করুন স্থাপত্য কাগজে লক্ষ্য পূরণ করতে পারত কি না, এবং তা পূরণের খরচ কখনও বলা হয়েছিল কি না। শীর্ষ সেবার লক্ষ্য ব্যবসার সঙ্গে কে ও কবে নিশ্চিত করবেন তাতে একমত হোন।

3. একটি ব্যর্থ মহড়া খ্যাতিতে আমাদের কত খরচ করত, এবং তা কি আমাদের মহড়া কতটা কঠিন তা আকার দেয়? এই প্রশ্ন মহড়া নরম করা চাপ সামনে আনে। জিজ্ঞাসা করুন একটি ব্যর্থ পরীক্ষা দলের ব্যর্থতা হিসেবে দেখা হয় নাকি মহড়ার সাফল্য হিসেবে।

4. আমাদের শেষ মহড়ার কোন আবিষ্কার এখনও খোলা, এবং কেন? বয়স ও মালিকসহ তালিকা জোরে পড়ুন। প্রতিটি বিলম্বিত আইটেমের জন্য জিজ্ঞাসা করুন কী আটকাচ্ছে: প্রতিযোগী কাজ, অস্পষ্ট মালিকানা, খরচ, বা ঝুঁকি গ্রহণযোগ্য এই বিশ্বাস। লক্ষ্য কোনো আবিষ্কার মালিকহীন অবস্থায় না থাকা।

5. আমাদের পরিকল্পনা কী ধরে নেয় যা আর সত্য নয়? একটি পরিকল্পনা বাছুন এবং যিনি লেখেননি এমন কারো সঙ্গে পড়ুন। অবসরপ্রাপ্ত টুল, নাম বদলানো অ্যাকাউন্ট এবং চলে যাওয়া সরবরাহকারী খুঁজুন। জিজ্ঞাসা করুন সেবা বদলালে পরিকল্পনা কীভাবে হালনাগাদ হবে, এবং না হলে কে লক্ষ করবে। উত্তরটি পরিবর্তনের প্রক্রিয়ার সঙ্গে যুক্ত করুন।

6. কোন নির্ভরতা সবকিছু থামিয়ে দেবে, এবং আমরা কি কখনও তা ছাড়া পরীক্ষা করেছি? পরিচয়, নাম সমাধান, গোপন তথ্য এবং পেজিং ব্যবস্থার মতো ভাগ করা সেবা সাধারণ একক ব্যর্থতার বিন্দু। দলকে সেগুলোর নাম দিতে এবং প্রতিটি সর্বশেষ কখন ইচ্ছে করে অনুপলব্ধ ছিল বর্ণনা করতে বলুন।

চারটি দৃষ্টিভঙ্গি

পণ্য ও ডেলিভারি দল

পণ্য দল পুনরুদ্ধার সম্ভব করা নকশার মালিক, তাই তারা জটিল সেবার সম্পন্নের সংজ্ঞার অংশ হিসেবে ধারাবাহিকতার মুখোমুখি হয়: একটি ব্যাকআপ পথ, একটি পুনরুদ্ধারের পদ্ধতি এবং কাজ করে এমন একটি রানবুক। তাদের নিজস্ব ছন্দের অংশ হিসেবে পুনরুদ্ধারের মহড়া চালানো, সেবার সঙ্গে পুনরুদ্ধারের কোড রাখা, এবং একটি ব্যর্থ মহড়াকে ব্যাকলগ আইটেম ধরা উচিত।

সেবা ও পরিচালন দল

পরিচালন দল বেশিরভাগ মহড়া চালায় এবং প্রস্তুতির ভার বহন করে। তাদের মহড়ার ক্যালেন্ডার রাখা, মহড়া চলার সময় সময়রেখা লিপিবদ্ধ করা এবং একই দিনে আবিষ্কার লেখা উচিত। ফল সেবা ও পরিকল্পনা বর্ণনা করে, এবং একটি মহড়া স্বতন্ত্র কে কত দ্রুত পুনরুদ্ধার করেছেন তা দিয়ে কাউকে ক্রম দেওয়া হয় না।

নেতৃত্ব ও গভর্ন্যান্স

নেতারা ব্যবসার সঙ্গে লক্ষ্য ঠিক করেন এবং কতটা পুনরুদ্ধার কেনার যোগ্য তা ঠিক করেন। প্রতিটি লক্ষ্যের পাশে সর্বশেষ প্রদর্শিত ফল, প্রমাণের বয়স এবং খোলা আবিষ্কার দেখতে চাওয়া তাঁদের উচিত, এবং একটি পরিষ্কার খাতাকে পুরস্কৃত করা এড়ানো উচিত। গভর্ন্যান্স সংস্থা ধারাবাহিকতার পরিমাপের একটি ছোট, স্থিতিশীল সংগ্রহ আশা করা উচিত, ঝুঁকির নিবন্ধন এবং যেখানে প্রযোজ্য সেখানে নিয়ন্ত্রিত প্রতিবেদনের সঙ্গে যুক্ত (বিষয় 8.2, ঝুঁকি ও নিয়ন্ত্রণের মেট্রিক এবং বিষয় 8.5, নিয়ন্ত্রক ও সরকারি প্রতিবেদন দেখুন)।

গ্রাহক ও ব্যবহারকারী

গ্রাহকেরা ধারাবাহিকতা কদাচিৎ দেখেন যতক্ষণ না তা গুরুত্বপূর্ণ হয়, এবং তখন তা সম্পূর্ণ ফল দিয়ে বিচার করেন: কতক্ষণ তাঁরা সেবা ছাড়া ছিলেন এবং তাঁদের তথ্য টিকেছে কি না। তাঁরা লাভবান হন কী প্রতিশ্রুত হয়েছে তার পরিষ্কার বিবৃতিতে, তাঁরা বুঝতে পারেন এমন ভাষায়, এবং একটি ইনসিডেন্ট পরিকল্পনা ডাকলে সৎ যোগাযোগে। যেখানে চুক্তিতে পুনরুদ্ধারের অঙ্গীকার আছে, অনুরোধে মহড়ার প্রমাণ ভাগ করুন (বিষয় 5.1, SLA, OLA ও XLA মেট্রিক দেখুন)।

বাস্তবে: সেবা ব্যবস্থাপনার একটি উদাহরণ

একটি আঞ্চলিক হাসপাতালের আইটি বিভাগ একটি রোগীর সময়সূচি ব্যবস্থা, একটি চিকিৎসা ইমেজিং আর্কাইভ এবং একটি কর্মী বার্তা সেবা চালায়। আটজনের একটি পণ্য দল সময়সূচি রক্ষণাবেক্ষণ করে, এবং একটি পরিচালন দল প্ল্যাটফর্ম চালায়। এই উদাহরণের সব সংখ্যা দৃষ্টান্তমূলক।

বিভাগের নিবন্ধন সময়সূচিকে ২ ঘণ্টার RTO ও ১৫ মিনিটের RPO সহ স্তর ১ হিসেবে তালিকাভুক্ত করে। এর ত্রৈমাসিক প্রতিবেদন দেখায় "RTO পূরণের হার: ৪টি মহড়ায় ১০০ শতাংশ" এবং "পরীক্ষিত পুনরুদ্ধারের আচ্ছাদন: ১০০ শতাংশ।" পরিচালনার একজন নতুন প্রধান সংখ্যার পেছনের মহড়ার প্রতিবেদন পড়েন। চারটি মহড়ার তিনটি টেবিলটপ ছিল, এবং একমাত্র হাতে-কলমে পুনরুদ্ধার প্রোডাকশনের তথ্যের প্রায় এক-দশমাংশ ধরা ডেটাবেসের একটি কপি ব্যবহার করেছিল। ১৪ মাসে কেউ একটি পরিষ্কার পরিবেশে ব্যাকআপ পুনরুদ্ধার করেনি।

দল কী মাপা ও পরীক্ষা করা হয় তা বদলাতে ঠিক করে। এটি পরীক্ষিত পুনরুদ্ধারের আচ্ছাদনকে শুধু হাতে-কলমে পরীক্ষা গোনার জন্য পুনঃসংজ্ঞায়িত করে, যা তিনটি স্তর-১ সেবা জুড়ে সংখ্যা ৩৩ শতাংশে নামায়। এটি সারির গণনা ও একটি সিনথেটিক বুকিং লেনদেনের স্বয়ংক্রিয় যাচাইসহ সময়সূচির জন্য একটি প্রোডাকশন-আকারের পুনরুদ্ধার নির্ধারণ করে। চালনায় ২ ঘণ্টার RTO-র বিপরীতে ৩ ঘণ্টা ৪০ মিনিট লাগে, এবং পুনরুদ্ধার হওয়া তথ্য ১৫ মিনিটের RPO-র বিপরীতে ব্যর্থতার বিন্দুর ৪০ মিনিট পিছনে, কারণ একটি স্থানান্তরের সময় লগ শিপিং থামানো হয়েছিল এবং আর চালু হয়নি। গেম ডে ৯টি আবিষ্কার তৈরি করে: ২টি উচ্চ, ৫টি মাঝারি এবং ২টি নিম্ন তীব্রতার।

লগে লিপিবদ্ধ সিদ্ধান্ত হলো ফসকানোকে বছরের সবচেয়ে মূল্যবান ফল হিসেবে দেখা। দল লগ শিপিং আবার চালু করা ও তার বিলম্বে একটি সতর্কবার্তা, পুনরুদ্ধার সমান্তরাল করা এবং একটি ডেটা ভলিউম দ্রুততর সংরক্ষণে সরানোর কাজ খোলে। RTO ২ ঘণ্টাই থাকে, এবং দল সময়সূচির জন্য একটি নথিভুক্ত ম্যানুয়াল বিকল্প যোগ করে। প্রথম ৬০ দিনে আবিষ্কার বন্ধের হার ৯টির ৭টি সময়মতো, বাকি দুটি নামযুক্ত মালিকদের ঝুঁকি হিসেবে গৃহীত।

এখানে ধরা কারসাজির ঝুঁকিটি সূক্ষ্ম ছিল। কেউ সংখ্যা জাল করেনি: টেবিলটপের উদার গণনা এবং একটি ছোট পরীক্ষার ডেটাসেট প্রতিবেদন সবুজ করেছিল। যে রক্ষাবেষ্টনী কাজ করেছে তা ছিল প্রতিটি ফলের সঙ্গে তথ্যের আকার ও মহড়ার ধরন লিপিবদ্ধ করা, এবং পেছনের মহড়ার প্রতিবেদন পড়ার চর্চা। পরের প্রতিবেদনে দল প্রতিটি মহড়া নিজস্ব সারিতে দেখায়, ব্যর্থ চালনা সহ।

এজাইল, এআই, অটোমেশন ও বিশ্লেষণ

এজাইল

অংশীজনদের সঙ্গে ছোট, ঘন ঘন মহড়ায় পুনরুদ্ধার মহড়া দিন এবং যা প্রকাশ পায় তা ঠিক করুন। সতর্কতা হলো, সবসময় পাস করা স্ক্রিপ্ট করা মহড়া মিথ্যা স্বস্তি দেয়।

এআই

এআই সেবা পুনরুদ্ধারের পরিকল্পনায় মডেল, ভেক্টর সংরক্ষণ ও তৃতীয় পক্ষের API-র মতো নতুন নির্ভরতা যোগ করে। এগুলো পরীক্ষিত পুনরুদ্ধারের আচ্ছাদনে অন্তর্ভুক্ত করুন এবং পুনরুদ্ধারের সময়কে পুনরুদ্ধারের পর উত্তর সঠিক কি না তার যাচাইয়ের সঙ্গে জোড় বাঁধুন। সতর্কতা হলো, পুনরুদ্ধার হওয়া এআই সেবা ভিন্ন মডেল সংস্করণ চালাতে বা তার তথ্য হারাতে পারে, তাই শুধু প্রাপ্যতা নয়, আচরণ যাচাই করুন।

অটোমেশন

ব্যাকআপ যাচাই ও পুনরুদ্ধারের পরীক্ষা স্বয়ংক্রিয় করুন, এবং স্বয়ংক্রিয়করণকে ব্যর্থ পুনরুদ্ধারে মাপুন। সতর্কতা হলো, সম্পন্ন হওয়া ব্যাকআপ পুনরুদ্ধার হওয়া ব্যাকআপ নয়, তাই পুনরুদ্ধার পরীক্ষা করুন।

বিশ্লেষণ

শেষ পরীক্ষার তারিখসহ পরীক্ষায় পূরণ হওয়া লক্ষ্য, এবং বন্ধ হওয়া মহড়ার আবিষ্কার প্রতিবেদন করুন। এটি যে সিদ্ধান্তে তথ্য জোগায় তা হলো কোন পুনরুদ্ধার সবচেয়ে কম প্রমাণিত। সতর্কতা হলো, কম প্রকৃত পুনরুদ্ধার মানে ছোট নমুনা, তাই গণনা দেখান।

খাতভিত্তিক দৃষ্টিকোণ

স্টার্টআপ। সাধারণত একটি প্রোডাকশন পরিবেশ, একটি ছোট দল এবং একজন ম্যানেজড ক্লাউড প্রদানকারী থাকে। সবচেয়ে মূল্যবান পরিমাপ সবচেয়ে সরল: প্রতি মাসে প্রোডাকশনের ডেটাবেস ব্যাকআপ থেকে একটি পরিষ্কার পরিবেশে পুনরুদ্ধার করুন, সময় মাপুন এবং ফল যাচাই করুন। RTO ও RPO এক পাতায় লিখুন।

ছোট ব্যবসা। আইটি প্রায়ই আউটসোর্স করা বা হোস্ট করা সেবায় এক বা দুজন মানুষ চালায়। সরবরাহকারীকে লিখিতভাবে জিজ্ঞাসা করুন কী পুনরুদ্ধারের অঙ্গীকার করে এবং কী প্রমাণ দেখাতে পারে, এবং প্রতি ত্রৈমাসিকে আপনার নিজের তথ্যের একটি পুনরুদ্ধার পরীক্ষা করুন। প্রধান ব্যবস্থা বন্ধ থাকলে পড়া যায় এমন জায়গায় এক পাতার একটি পরিকল্পনা রাখুন।

এন্টারপ্রাইজ। বহু সেবা, বহু সরবরাহকারী ও ভাগ করা প্ল্যাটফর্ম স্তর ও একটি নির্ভরতার মানচিত্রকে অপরিহার্য করে। লক্ষ্যসহ একটি কেন্দ্রীয় সেবার নিবন্ধন, একটি মহড়ার ক্যালেন্ডার, স্বয়ংক্রিয় পুনরুদ্ধার যাচাই এবং সঙ্গতিপূর্ণ প্রতিবেদনে বিনিয়োগ করুন যাতে ফল দলগুলো জুড়ে তুলনা করা যায়।

সরকার ও জনসেবা খাত। ধারাবাহিকতার দায়িত্ব আইন, নিরীক্ষা বা নীতি থেকে আসতে পারে, এবং একটি সরকারি সেবাকে জরুরি অবস্থার সময়ও কাজ চালিয়ে যেতে হতে পারে। পরীক্ষার প্রমাণ প্রায়ই বাইরে পর্যালোচিত হয়, তাই মহড়ার প্রতিবেদন, আবিষ্কার ও বন্ধের রেকর্ড একজন নিরীক্ষক পড়তে পারেন এমন রূপে রাখুন। ক্রয় পুনরুদ্ধারের ব্যবস্থা আটকে দিতে পারে, তাই চুক্তিতে মহড়ার অধিকার ও প্রমাণ অন্তর্ভুক্ত করুন (বিষয় 8.5, নিয়ন্ত্রক ও সরকারি প্রতিবেদন দেখুন)।

ব্যবসায়িক যুক্তি: প্রেরণা, ROI ও TCO

বিনিয়োগের কারণ হলো ব্যবসা সইতে পারার চেয়ে দীর্ঘ একটি গুরুতর বিভ্রাটের খরচ, পুনঃসৃষ্টি করা যায় না এমন তথ্য হারানো, এবং প্রস্তুতির প্রমাণ চাওয়া গ্রাহক, নিয়ন্ত্রক ও বিমাকারীদের প্রতি বাধ্যবাধকতা। ধারাবাহিকতার কাজ বিমা, তাই প্রতিদান এড়ানো ক্ষতি এবং সিদ্ধান্তগ্রহণকারীদের আস্থা, যা একটি সংখ্যা বানানো ছাড়া প্রকাশ করা কঠিন। পর্যবেক্ষণযোগ্য ধারার মাধ্যমে বর্ণনা করুন: ঘোষিত ও প্রদর্শিত পুনরুদ্ধারের সময়ের ফাঁক, প্রকৃত ঘটনায় নয়, মহড়ায় পাওয়া উচ্চ-তীব্রতার আবিষ্কারের সংখ্যা, এবং প্রমাণের জন্য একজন গ্রাহক বা নিরীক্ষকের অনুরোধের উত্তর দেওয়ার সময়।

খরচ তিন গোষ্ঠীতে আসে: লক্ষ্য যে রিডান্ডেন্সি ও টুলিং দাবি করে, মহড়া পরিকল্পনা, চালানো ও পর্যালোচনায় মানুষের সময়, এবং পরিকল্পনা ও নির্ভরতার মানচিত্র সাময়িক রাখার শ্রম।

মোট মালিকানা খরচে মানুষ ও কঠোরতর স্তরগুলো প্রাধান্য পায়। ২৪ ঘণ্টার RTO থেকে ২ ঘণ্টায় যাওয়া নকশা ও বিল বদলায়, তাই ব্যবসার সঙ্গে সেই বিনিময় স্পষ্ট করুন। ছোট, ঘন ঘন, স্বয়ংক্রিয় পরীক্ষা সাধারণত একটি বড় বার্ষিক ঘটনার চেয়ে কম খরচ করে কারণ ত্রুটি সংশোধন সস্তা থাকা অবস্থায়ই সামনে আসে।

অ্যান্টি-প্যাটার্ন ও ফাঁদ

  • তাকে রাখা পরিকল্পনা। একটি দলিল প্রস্তুতি গোনা হয়, এবং কেউ চেষ্টা করেনি। বদলে প্রতিটি লক্ষ্যের পাশে সর্বশেষ হাতে-কলমে পরীক্ষার তারিখ ও ফল প্রতিবেদন করুন।
  • পুনরুদ্ধারের সাফল্য হিসেবে ব্যাকআপের সাফল্য। কাজ সবুজ জানায় যখন তথ্য পুনরুদ্ধার করা যায় না। বদলে নিয়মিত পুনরুদ্ধার পরীক্ষা করুন এবং সাফল্য গোনার আগে তথ্য যাচাই করুন।
  • মহড়া করা নাটক। মহড়া স্ক্রিপ্ট করা এবং পরিকল্পনার লেখকেরা চালান। বদলে ধীরে ধীরে চমক যোগ করুন।
  • সবকিছুর জন্য একটি লক্ষ্য। টেমপ্লেট বলেছিল বলে প্রতিটি সেবার চার ঘণ্টার RTO। বদলে একটি ব্যবসায়িক প্রভাব বিশ্লেষণ থেকে সেবাকে স্তর দিন এবং মানানসই লক্ষ্য ঠিক করুন।
  • যে আবিষ্কার কখনও বন্ধ হয় না। মহড়ার প্রতিবেদন ফাঁক তালিকা করে আর ব্যাকলগ তা কখনও দেখে না। বদলে প্রতিটি আবিষ্কারকে একজন মালিক ও নির্ধারিত তারিখ দিন, এবং পুনঃপরীক্ষা দিয়ে বন্ধ যাচাই করুন।
  • ব্যর্থ পরীক্ষাকে শাস্তি। যে দল একটি ফসকানো RTO-র জন্য দোষ পায় সে কঠিন পরীক্ষা চালানো বন্ধ করবে। বদলে আগেই একমত হোন যে ভালো আবিষ্কারসহ ব্যর্থ মহড়া একটি ভালো ফল, এবং দোষ ছাড়া পর্যালোচনা করুন।
  • দ্রুত পরিবর্তনের পর বাসি পরিকল্পনা। ক্যালেন্ডার পর্যালোচনা চালায় এবং স্থাপত্যের পরিবর্তন পিছলে যায়। বদলে পরিকল্পনার পর্যালোচনা বস্তুগত পরিবর্তনের রেকর্ডের সঙ্গে যুক্ত করুন এবং তাদের বিপরীতে পরিকল্পনার সাময়িকতা মাপুন।

পরিপক্বতার মডেল

মাত্রা 1 সূচনা 2 বিকাশ 3 মানসম্মত 4 পরিচালিত 5 সুসমন্বিত
লক্ষ্য ও স্তর RTO ও RPO অলিখিত বা টেমপ্লেট থেকে নকল কিছু মূল সেবার জন্য লক্ষ্য লেখা স্তর ও লক্ষ্য একটি ব্যবসায়িক প্রভাব বিশ্লেষণ থেকে আসে এবং সেবার নিবন্ধনে বসে প্রদর্শিত ফল ও স্থাপত্যের বিপরীতে লক্ষ্য পর্যালোচিত সেবা বদলালে ব্যবসা ও সরবরাহকারীদের সঙ্গে যৌথভাবে সম্মত ও সমন্বিত লক্ষ্য
পরীক্ষা ও প্রমাণ পুনরুদ্ধার কখনও পরীক্ষিত নয়, বা একটি ইনসিডেন্টের পর একবার পরীক্ষিত কিছু দলের এলোমেলো পুনরুদ্ধারের পরীক্ষা; ফল ব্যক্তিগত নোটে লিপিবদ্ধ পরিধি, সময়রেখা ও ফলসহ স্তরযুক্ত পরীক্ষার ব্যবধান টেবিলটপ, মহড়া ও গেম ডে আলাদা প্রতিবেদিত, ফল ট্র্যাক করা ঝুঁকি থেকে নির্ধারিত চমকসহ দল ও সরবরাহকারী জুড়ে মহড়া
আবিষ্কার ও শেখা ফাঁক অনানুষ্ঠানিকভাবে লক্ষ করা কিছু মহড়ার পর আবিষ্কার তালিকাভুক্ত প্রতিটি আবিষ্কারের একজন মালিক, তীব্রতা ও নির্ধারিত তারিখ আছে বন্ধের হার ও বয়স পর্যালোচিত, পুনঃপরীক্ষা বন্ধ নিশ্চিত করে আবিষ্কার ভাগ করা প্ল্যাটফর্ম, সরবরাহকারীর চুক্তি ও নকশার মানকে খাওয়ায়
পরিকল্পনার সাময়িকতা পরিকল্পনা একবার লেখা ইনসিডেন্টের পর পরিকল্পনা হালনাগাদ পর্যালোচনার ব্যবধানসহ সংস্করণ নিয়ন্ত্রণে পরিকল্পনা বস্তুগত পরিবর্তনের সঙ্গে যুক্ত ও মাপা পর্যালোচনা যেখানে সম্ভব কোড হিসেবে পরীক্ষিত এবং সেবার সংজ্ঞা থেকে তৈরি পরিকল্পনা ও রানবুক

চেকলিস্ট

  • প্রতিটি স্তর-১ সেবার একটি লিখিত RTO ও RPO আছে যা একটি ব্যবসায়িক প্রভাব বিশ্লেষণ থেকে এসেছে।
  • সেবার নিবন্ধন প্রতিটি সেবার স্তর, লক্ষ্য ও পরীক্ষার ব্যবধান দেখায়।
  • RTO ও RPO-র ঘড়ি, স্বাস্থ্য যাচাই ও বাদ লেখা আছে (বিষয় 1.5, তথ্যের উৎস ও ইনস্ট্রুমেন্টেশন দেখুন)।
  • হাতে-কলমে পুনরুদ্ধারের পরীক্ষা, টেবিলটপ ও গেম ডে আলাদা ধরন হিসেবে প্রতিবেদিত।
  • প্রতিটি পুনরুদ্ধারের পরীক্ষা তথ্যের আকার, পরিস্থিতি, চমকের স্তর এবং মাপা পুনরুদ্ধারের সময় ও তথ্য হারানো লিপিবদ্ধ করে।
  • ব্যাকআপ থেকে পুনরুদ্ধার স্বয়ংক্রিয়ভাবে পরীক্ষিত, এবং একটি তথ্য যাচাইয়ের যাচাই সাফল্য ঠিক করে।
  • প্রতিটি মহড়ার আবিষ্কারের একজন মালিক, একটি তীব্রতা, একটি নির্ধারিত তারিখ এবং ব্যাকলগে একটি জায়গা আছে।
  • পরিকল্পনার পর্যালোচনা বস্তুগত পরিবর্তনের রেকর্ডের সঙ্গে যুক্ত, এবং সবচেয়ে পুরোনো অপর্যালোচিত পরিকল্পনা দৃশ্যমান।
  • নির্ভরতার মানচিত্রে ভাগ করা সেবা আছে, এবং অন্তত একটি পরিস্থিতি তাদের একটি সরায়।
  • এই বিষয়ের প্রতিটি মেট্রিকের মেট্রিক নিবন্ধনে একটি নামযুক্ত রক্ষাবেষ্টনী ও একজন মালিক আছে (বিষয় 1.4, মেট্রিকের গভর্ন্যান্স ও মালিকানা দেখুন)।
  • মহড়ার দায়িত্ব ঘোরে, এবং তাতে লাগা সময় পরিচালনার ভার হিসেবে গোনা।

এআই প্রম্পট

একটি পুনরুদ্ধারের পরীক্ষা ও তার সঙ্গে যাওয়া পরিমাপ নকশা করুন।

আমি [সেবার নাম]-এর পুনরুদ্ধার পরীক্ষা করতে চাই, একটি [স্তর] সেবা যার ঘোষিত RTO [RTO] ও RPO [RPO]।
এর মূল উপাদান [তালিকা: ডেটা সংরক্ষণ, সারি, কম্পিউট, ভাগ করা সেবা] এবং এর সরবরাহকারী [তালিকা]।
একটি বাস্তবসম্মত পরিস্থিতি, ঘড়ি শুরু করা ঘটনা, ঘড়ি থামানো স্বাস্থ্য যাচাই, RPO-র বিপরীতে তথ্য
হারানো কীভাবে মাপবেন, ব্যবহারের তথ্যের আকার, কী লিপিবদ্ধ করবেন, এবং প্রোডাকশনের ক্ষতি
ঠেকানোর সুরক্ষাসহ একটি পরীক্ষা পরিকল্পনার খসড়া করুন। বেঞ্চমার্ক সময় বানাবেন না বা কোনো লক্ষ্য
অর্জনযোগ্য দাবি করবেন না। আপনার অনুমান এবং পরিকল্পনা সম্পূর্ণ করতে আমার যে প্রশ্নের উত্তর
দেওয়া উচিত তা তালিকা করুন।

তোষামোদী প্রমাণের জন্য মহড়ার প্রতিবেদন পর্যালোচনা করুন।

এখানে আমাদের শেষ [সংখ্যা]টি পুনরুদ্ধার মহড়ার সারসংক্ষেপ: [প্রতিটির জন্য পেস্ট করুন: ধরন, তারিখ, পরিধি,
তথ্যের আকার, পুনরুদ্ধারের সময়, তথ্য হারানো, আবিষ্কারের গণনা]। আমাদের লক্ষ্য [স্তর অনুযায়ী RTO ও
RPO]। যেখানে প্রতিবেদিত ফল প্রকৃত পুনরুদ্ধারের সক্ষমতা বাড়িয়ে বলতে পারে, যেমন ছোট ডেটাসেট,
স্ক্রিপ্ট করা পরিস্থিতি, শুধু-টেবিলটপ আচ্ছাদন বা শিথিল স্বাস্থ্য যাচাই, তা শনাক্ত করুন। কোন বাড়তি
তথ্য লিপিবদ্ধ করবেন এবং প্রতিটি ফলের সঙ্গে কোন রক্ষাবেষ্টনী মেট্রিক জোড় বাঁধবেন প্রস্তাব করুন।
বেঞ্চমার্ক মান বানাবেন না বা আমি না দেওয়া তথ্য ধরে নেবেন না। আপনার অনুমান তালিকা করুন।

গেম ডের নোটকে আবিষ্কার ও ব্যাকলগ আইটেমে পরিণত করুন।

এখানে [সেবা]-র একটি গেম ডের কাঁচা নোট: [নোট ও সময়রেখা পেস্ট করুন]। পরিকল্পনা ও যা ঘটেছিল তার
মধ্যবর্তী প্রতিটি ফাঁক একটি সংক্ষিপ্ত শিরোনাম, একটি বর্ণনা, এই স্কেল [তীব্রতার স্কেল] ব্যবহার করে
একটি প্রস্তাবিত তীব্রতা, একটি প্রার্থী মালিকের ভূমিকা (নামযুক্ত ব্যক্তি নয়) এবং সংশোধন কীভাবে যাচাই
করতে পারি সহ একটি পৃথক আবিষ্কার হিসেবে বের করুন। একই মূল কারণ ভাগ করতে পারে এমন আবিষ্কার
গোষ্ঠী করুন। নোটে নেই এমন ঘটনা বানাবেন না। আপনার অনুমান এবং যা স্পষ্ট করা দরকার তা তালিকা
করুন।

সাম্প্রতিক পরিবর্তনের বিপরীতে একটি পরিকল্পনার সাময়িকতা যাচাই করুন।

এখানে [তারিখ]-এ সর্বশেষ পর্যালোচিত [সেবা]-র ধারাবাহিকতার পরিকল্পনা: [পরিকল্পনা বা রূপরেখা পেস্ট
করুন]। তারপর থেকে বস্তুগত পরিবর্তন এই: [স্থাপত্য, ডেটা সংরক্ষণ, নির্ভরতা, সরবরাহকারী ও টুলিংয়ের
পরিবর্তনের তালিকা]। পরিকল্পনার যে ধাপ, যোগাযোগ, টুল ও নির্ভরতা পরিবর্তনগুলো ভুল করে থাকতে
পারে তা শনাক্ত করুন, এবং একজন পর্যালোচকের জিজ্ঞাসার প্রশ্ন তালিকা করুন। আমাদের ব্যবস্থা সম্পর্কে
বিবরণ বানাবেন না। আপনার অনুমান তালিকা করুন।

এআই স্কিল

  • Service Management Metrics skill: একটি ধারাবাহিকতা, পুনরুদ্ধার বা মহড়ার মেট্রিক কোন বিষয় সংজ্ঞায়িত করে এবং তার সঙ্গে জোড় বাঁধার রক্ষাবেষ্টনী খুঁজে পেতে ব্যবহার করুন।
  • Service Management Metrics maintainer skill: একটি সম্পাদিত ধারাবাহিকতার মেট্রিক তার ঘড়ি, বাদ দেওয়া ও কারসাজির উপায় বলে কি না যাচাই করতে ব্যবহার করুন।

মূল শিক্ষা

  • একটি পুনরুদ্ধারের লক্ষ্য একটি প্রতিশ্রুতি, এবং কেবল একটি সময় মাপা, বাস্তবসম্মত মহড়া দেখায় তা রাখা যায় কি না।
  • প্রতিটি RTO ও RPO-র পাশে সর্বশেষ প্রদর্শিত ফল ও তার বয়স প্রতিবেদন করুন, এবং প্রতিটি মহড়া নিজস্ব সারিতে দেখান।
  • ব্যাকআপ নয়, পুনরুদ্ধার পরীক্ষা করুন: একটি পুনরুদ্ধার গোনা হয় কেবল যখন তথ্য ব্যবহারযোগ্য হিসেবে যাচাই হয়েছে।
  • একটি মহড়ার ফল আবিষ্কারের একটি বন্ধ তালিকা, তাই তাদের বয়স ট্র্যাক করুন এবং পুনঃপরীক্ষা দিয়ে বন্ধ নিশ্চিত করুন।
  • পরিকল্পনা সংস্করণ নিয়ন্ত্রণে রাখুন এবং তার পর্যালোচনা শুধু ক্যালেন্ডারের সঙ্গে নয়, বস্তুগত পরিবর্তনের সঙ্গে বাঁধুন।
  • সেবা ও পরিকল্পনা মাপুন, কখনও মানুষ নয়, এবং ভালো আবিষ্কারসহ একটি ব্যর্থ মহড়াকে নিরাপদ ও সম্মানিত ফল করুন।

তথ্যসূত্র ও আরও পড়ার জন্য

  1. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  2. Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018, https://sre.google/workbook/table-of-contents/
  3. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  4. ISO 22301:2019, Security and resilience: Business continuity management systems: Requirements, International Organization for Standardization.
  5. ISO 22313:2020, Security and resilience: Business continuity management systems: Guidance on the use of ISO 22301, International Organization for Standardization.
  6. Rosenthal, C., and Jones, N., Chaos Engineering: System Resiliency in Practice, O'Reilly Media, 2020.
  7. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  8. Wikipedia, Business continuity planning.
  9. Wikipedia, Recovery time objective.
  10. Wikipedia, Recovery point objective.
  11. Wikipedia, Business impact analysis.
  12. Wikipedia, ISO 22301.
  13. Wikipedia, Backup.
  14. Wikipedia, Chaos engineering.
  15. Wikipedia, Site reliability engineering.
  16. Wikipedia, Infrastructure as code.