نظرة عامة والدافع

الحادثة، في إدارة خدمات تقنية المعلومات (ITSM)، انقطاع غير مخطط في خدمة أو انخفاض في جودتها. وإدارة الحوادث (incident management) هي الممارسة التي تستعيد الخدمة العادية بأسرع ما هو آمن. وفي ITIL 4 تسمى الممارسة إدارة الحوادث وتقع بين ممارسات إدارة الخدمات في إطار ITIL. ونظيراتها الأجايلية عادة الفريق في معاملة العمل غير المخطط تيار عمل من الدرجة الأولى، وممارسات الاستدعاء والمراجعة بلا لوم القادمة من هندسة موثوقية المواقع (site reliability engineering) (SRE)، وهي تخصص تشغيل الخدمات بأساليب هندسة البرمجيات.

الزمن أكثر الطرق طبيعية لوصف حادثة، وأكثرها إساءة استخدام. تمر الحادثة الواحدة بعدة مراحل. ينكسر شيء، ويلاحظه مراقب أو مستخدم، ويقر شخص بالتنبيه، ويبدأ أحدهم العمل، وتُستعاد الخدمة للمستخدمين، وتُغلق التذكرة بعد معالجة السبب أو تأجيله. كل فجوة بين حدثين من هذه مقياس منفصل بمالك منفصل وسبب تأخير منفصل وعلاج منفصل. تسمية الكل «زمن الحل» تخفي أين يقع التأخير.

يغطي هذا الموضوع مقاييس الزمن المنقضي التي تتبع حادثة من البداية إلى النهاية: زمن الاكتشاف (time to detect)، وزمن الإقرار (time to acknowledge)، وزمن أول استجابة (time to first response)، وزمن الاستعادة (time to restore)، وزمن الحل (time to resolve). ويغطي أيضًا عمر الحوادث المفتوحة، وعدد مرات انتقال حادثة بين الأيدي، والمشكلات الإحصائية لأشهر ملخص، متوسط زمن الاستعادة أو الحل (MTTR). الأعداد والفئات والأولوية تُغطى في موضع آخر (انظر الموضوع 3.2، حجم الحوادث وأولويتها). وللحوادث الكبيرة وغير المعتادة مقاييسها الخاصة (انظر الموضوع 3.4، مقاييس الحوادث الكبرى).

المصطلحات المستخدمة في هذا الموضوع

  • زمن الاكتشاف (TTD). الزمن المنقضي منذ بدأ العطل يؤثر في المستخدمين حتى عرفت المؤسسة به، بالمراقبة أو ببلاغ مستخدم.
  • زمن الإقرار (TTA). الزمن المنقضي من إثارة التنبيه أو التذكرة حتى يقبل شخص مسمّى أو فريق ملكيتها.
  • زمن أول استجابة. الزمن المنقضي من تسجيل الحادثة حتى أول إجراء أو رسالة ذات معنى إلى المستخدم المتأثر. الرد الآلي لا يُحتسب.
  • زمن الاستعادة. الزمن المنقضي من بدء أثر المستخدم حتى يستطيع المستخدمون استخدام الخدمة مجددًا، حتى لو لم يُعالج السبب الكامن إلا بحل بديل.
  • زمن الحل. الزمن المنقضي من تسجيل الحادثة حتى إغلاقها لأن الخدمة استُعيدت وأكد المستخدم أو أُتيحت له فرصة عادلة للتأكيد.
  • متوسط زمن الاستعادة أو الحل (MTTR). المتوسط الحسابي لإحدى تلك المدد على مجموعة حوادث. يُقرأ الحرف R إصلاحًا أو تعافيًا أو استعادة أو حلًا أو استجابة بحسب المتكلم، وهذه أول مشكلة في الاختصار. وتسرد مقالة ويكيبيديا عن متوسط زمن الإصلاح (mean time to repair) الصيغ.
  • اتفاقية مستوى الخدمة (SLA). اتفاقية مستوى الخدمة (service-level agreement) التزام بين مزود وعميل بمستوى الخدمة، كثيرًا ما يشمل أهداف زمن الاستجابة والحل بحسب الأولوية.

لماذا المتوسط ملخص ضعيف

مدد الحوادث غير متماثلة. معظم الحوادث قصيرة، وقلة طويلة جدًا، والطويلة تهيمن على أي متوسط. وكثيرًا ما توصف المدد من هذا النوع جيدًا بشكل منحرف لليمين مثل التوزيع اللوغاريتمي الطبيعي (log-normal distribution). في البيانات المنحرفة يمكن أن يرتفع المتوسط كثيرًا فوق ما تبدو عليه حادثة نموذجية، وقد يحرك انقطاع طويل واحد المتوسط أكثر من شهر من التحسينات.

نشر فريق SRE في Google تحليلًا لهذه المشكلة. ويحاجج بأنه في مجموعات بيانات الحوادث التي درسها يكون تشتت مدد الحوادث واسعًا بما يكفي ليخفي MTTR تحسينات حقيقية أو يُظهر تغيرات هي ضجيج، ويوصي بالنظر إلى التوزيعات بدلًا من ذلك (Davidovič، 2021، مذكور في المراجع). ويستند المنطق إلى إحصاءات معروفة، فيمكنك فحصه على بياناتك دون الوثوق باستنتاج أحد: ارسم مدد حوادثك، واحسب المتوسط والوسيط (median)، وانظر كم يبعدان (انظر الموضوع 1.6، الثقافة الإحصائية لمقاييس الخدمة).

البديل النسب المئوية (percentiles). يقول الوسيط كم انتظر مستخدم نموذجي. وتقول النسبة المئوية 85 أو 95 كم انتظر سيئو الحظ. يتذكر العملاء الانتظار الطويل لا المتوسط، لذا فالتزام بنسبة مئوية مثل «تسع من كل عشر حوادث من هذه الأولوية تُستعاد ضمن زمن معلن» يطابق تجربتهم أفضل بكثير من متوسط.

كيف تختلف رؤيتا ITIL والأجايل

تميل رؤية ITIL إلى البدء من أولوية وهدف. يحدد الأثر والإلحاح أولوية، وتحدد الأولوية أهداف زمن الاستجابة والحل، وقد ترتب اتفاقية مستوى الخدمة عواقب على تفويتها. هذا منظم وسهل التدقيق، ومعرض للتلاعب الذي تدعو إليه الأهداف (انظر الموضوع 1.2، قانون غودهارت وسيكولوجية المقاييس).

وتبدأ رؤية الأجايل وSRE من أثر المستخدم ومن التدفق. تسأل كم بسرعة يحد الفريق الضرر، وكم من الزمن المنقضي للحادثة كان عملًا نشطًا وكم انتظارًا، وماذا تعلم الفريق. وتفضل مقاييس الأثر (المستخدمون المتأثرون، دقائق الخدمة المتدهورة) على مقاييس حالة التذكرة، وتعامل ساعة التذكرة وكيلًا مريحًا لكنه غير كامل. الرؤيتان متوافقتان. استخدم بنية الأولوية في ITIL لتقرر ما تقيس ولمن، واستخدم تفكير التدفق والأثر لتقرر هل للرقم معنى.

المبادئ الأساسية

  • سمِّ المرحلة، لا «الحل». الاكتشاف والإقرار والاستجابة والاستعادة والحل أسئلة مختلفة بمالكين مختلفين. أبلِغ كلًا تحت اسمه.
  • اكتب الساعتين. كل مقياس زمن يذكر أي حدث يبدأه وأيها يوقفه وأي حالات توقفه مؤقتًا. معظم التلاعب يعيش في هذه الحدود.
  • أبلِغ التوزيعات. أظهر الوسيط ونسبة مئوية عالية وعمر أقدم حادثة مفتوحة. تجنب المتوسط المنفرد، فالبيانات المنحرفة تجعله غير موثوق.
  • قِس الاستعادة منفصلة عن الإغلاق. يهتم المستخدمون بمتى عادت الخدمة. وقد تُغلق التذكرة لاحقًا بعد معالجة السبب.
  • اقرن السرعة بالديمومة. استعادة سريعة تنقضها الحادثة نفسها في اليوم التالي ليست تحسنًا. أظهر معدلي التكرار وإعادة الفتح بجوار كل مقياس زمن.
  • صف الفرق والخدمات والأنظمة. لا ترتّب الوكلاء أو المهندسين الأفراد بزمن الاستجابة أو الحل أبدًا.
  • قسّم قبل أن تقارن. قارن المتماثل بالمتماثل، بحسب الأولوية والخدمة، لأن رقمًا ممزوجًا يخلط إعادة ضبط كلمات المرور بأعطال قواعد البيانات.

تعريفات المقاييس

يذكر كل صف ساعتيه. الزمن التقويمي وزمن العمل مختلفان: قل أيهما تستخدم. وحيث يستخدم مقياس نسبًا مئوية، يعطي الجدول الـ50 والـ95، وللفرق إضافة الـ85.

المقياس التعريف الصيغة الوحدة مصدر البيانات ممارسة ITIL المقابل في الأجايل التكرار
زمن الاكتشاف كم ظل عطل يؤثر في المستخدمين قبل أن تعرف المؤسسة تبدأ الساعة عند أول لحظة أثر على المستخدمين (مأخوذة من بيانات المراقبة أو بداية الأثر المؤكدة المسجلة في المراجعة)؛ وتتوقف عند أول تنبيه أو بلاغ مستخدم. يُبلَّغ وسيطًا ونسبة مئوية 95 لكل خدمة. الحوادث بلا بداية معروفة تُعد وتُبلَّغ على حدة ولا تُسقط دقائق منصة المراقبة والتنبيه؛ سجل الحادثة بحقل بداية الأثر إدارة الحوادث؛ المراقبة وإدارة الأحداث قابلية الرصد وعمل جودة التنبيه (انظر الموضوع 5.5، مقاييس جودة المراقبة والتنبيهات) شهري
زمن الإقرار كم ينتظر تنبيه أو تذكرة مثارة قبل أن يملكها شخص تبدأ الساعة حين يُطلق التنبيه أو تُسجل التذكرة؛ وتتوقف حين يقبلها شخص مسمّى أو فريق. الإسناد الآلي لا يوقف الساعة. يُبلَّغ وسيطًا ونسبة مئوية 95 بحسب الأولوية دقائق أداة النداء؛ تاريخ الإسناد في أداة ITSM إدارة الحوادث؛ مكتب الخدمة الاستجابة للاستدعاء في مناوبة SRE شهري
زمن أول استجابة كم ينتظر المستخدم ردًا بشريًا أول مفيدًا تبدأ الساعة حين تُسجل الحادثة؛ وتتوقف عند أول رسالة أو إجراء بشري يعالج البلاغ. تُستثنى الإقرارات الآلية والإيصالات النمطية. تُذكر ساعة أوقات العمل دقائق أو ساعات عمل سجل الاتصالات في أداة ITSM مكتب الخدمة؛ إدارة الحوادث تغذية راجعة في الوقت المناسب للمستخدم، كما في اتفاقية عمل أسبوعي
زمن الاستعادة كم ظل المستخدمون بلا خدمة عاملة تبدأ الساعة عند بدء أثر المستخدم؛ وتتوقف حين يستطيع المستخدمون استخدام الخدمة مجددًا، بما في ذلك بحل بديل أو تراجع. إصلاح السبب لاحقًا لا يمددها. يُبلَّغ وسيطًا ونسبة مئوية 95 بحسب الأولوية والخدمة دقائق أو ساعات سجل الحادثة بطابعي بداية الأثر والاستعادة؛ المراقبة إدارة الحوادث متوسط زمن الاستعادة بمصطلحات DORA، يُقرأ توزيعًا (انظر الموضوع 2.8، مقاييس DORA) شهري
زمن الحل كم ظل سجل الحادثة مفتوحًا حتى أُغلق تبدأ الساعة حين تُسجل الحادثة؛ وتتوقف حين تُغلق بعد الاستعادة وتأكيد المستخدم أو انتظار عادل. يُظهر الزمن في «بانتظار العميل» حصةً منفصلة مبلَّغة ولا يُطرح من الرقم الرئيسي. يُبلَّغ وسيطًا ونسبة مئوية 95 بحسب الأولوية ساعات أو ساعات عمل تاريخ الحالة في أداة ITSM إدارة الحوادث زمن الدورة للعمل غير المخطط (انظر الموضوع 2.2، زمن الانتظار الكلي وزمن الدورة وكفاءة التدفق) شهري
عمر أقدم حادثة مفتوحة كم ظلت أقدم حادثة مفتوحة قائمة الآن ناقص وقت التسجيل، لكل حادثة مفتوحة، مع سرد الأقدم القليلة بحسب الأولوية. حالات التوقف المؤقت لا تُطرح أيام قائمة الحوادث المفتوحة في أداة ITSM إدارة الحوادث عمر بند العمل على لوحة الفريق (انظر الموضوع 2.1، مقاييس التدفق) أسبوعي
حصة الزمن النشط نسبة الزمن المنقضي للحادثة المقضية في عمل نشط لا انتظار مجموع الزمن في الحالات النشطة / الزمن الكلي من التسجيل إلى الإغلاق، للحوادث المغلقة في الفترة. الحالات النشطة هي التي يعمل فيها شخص على الحادثة؛ وحالات الانتظار مسرودة في التعريف نسبة مئوية تاريخ الحالة في أداة ITSM إدارة الحوادث كفاءة التدفق (انظر الموضوع 2.2، زمن الانتظار الكلي وزمن الدورة وكفاءة التدفق) ربع سنوي
عدد إعادات الإسناد كم مرة تغير حادثة الفريق المالك قبل الاستعادة عدد تغييرات مجموعة الإسناد من التسجيل إلى الاستعادة، مُلخَّصًا وسيطًا وحصة الحوادث ذات ثلاث مرات فأكثر. يُعد بحسب الخدمة والأولوية، لا الوكيل أبدًا عدد تاريخ الإسناد في أداة ITSM إدارة الحوادث؛ مكتب الخدمة عدد تسليمات المهام (انظر الموضوع 9.3، مقاييس التعاون وتسليم المهام) شهري

ملاحظتان عن البيانات. أولًا، زمن الاستعادة لا يزيد جودة عن وقت بدايته. تلتقط سجلات حوادث كثيرة وقت أن كتب شخص التذكرة، وقد يتأخر ذلك عن البدء الحقيقي للأثر بساعات. إن لم تكن في أداتك خانة بداية الأثر فأضفها، وعامل البدايات المقدرة تقديرات (انظر الموضوع 1.5، مصادر البيانات وأدوات القياس). وثانيًا، حين تقارن الفترات، أبقِ تعريفات الأولوية نفسها، وإلا فسيعكس خط الاتجاه إعادة التصنيف.

التوصيات

عرّف الساعات

1. اكتب ورقة ساعات لكل مقياس زمن. لكل مرحلة، اسرد حدث البداية وحدث التوقف والحالات التي توقف الساعة مؤقتًا وأساس الزمن (تقويمي أو ساعات عمل) والاستثناءات. احفظها في سجل المقاييس (انظر الموضوع 1.4، حوكمة المقاييس وملكيتها).

2. افصل الاستعادة عن الإغلاق. سجّل متى عادت الخدمة للمستخدمين طابعًا زمنيًا قائمًا بذاته، بمعزل عن إغلاق التذكرة. الاستعادة ما يشعر به المستخدمون، والإغلاق يشمل التحقق والتوثيق ومعالجة السبب. الفرق التي تستخدم طابعًا زمنيًا واحدًا للاثنين تُكافأ على الإغلاق المبكر أو تُعاقب على المتابعة الدقيقة.

3. سجّل بداية الأثر لا وقت التسجيل فقط. اطلب من المستجيبين ملء متى شعر المستخدمون بالأثر أول مرة، مستعينين ببيانات المراقبة حيثما أمكن. علّم الخانة مقدّرة حين تكون كذلك. زمن الاكتشاف بلا معنى دونها، وزمن الاستعادة يتشوه بغيابها.

4. حدّ حالات التوقف المؤقت وأبلِغ عن استخدامها. الانتظار للعميل أو المورد مشروع أحيانًا. اسمح بقائمة قصيرة مسماة من حالات التوقف، واشترط سببًا، وأظهر حصة زمن الحادثة المقضية في كل منها. ارتفاع حصة الزمن الموقوف علامة انجراف لا سرعة.

أبلِغ بأمانة

5. استبدل المتوسط بالوسيط ونسبة مئوية عالية. أظهر النسبة المئوية 50 و95 لكل مرحلة، بحسب الأولوية، سلسلة زمنية. أظهر عدد الحوادث خلف كل نقطة، لأن نسبة مئوية من عشر حوادث رقم ضعيف. وحيث الأعداد صغيرة، ارسم الحوادث الفردية نقاطًا وتجاوز خط الملخص.

6. أظهر عمر أقدم الحوادث المفتوحة. مخطط لمدد الحوادث المغلقة أعمى عن الحوادث التي ما زالت مفتوحة، وهي الأسوأ. اسرد أقدم الحوادث المفتوحة بحسب الأولوية كل أسبوع. يصعب تحسين هذا دون إنهاء العمل، فهو رفيق مفيد لأي مخطط زمن حل.

7. قسّم بحسب الأولوية والخدمة. يرتفع زمن الحل الممزوج حين يتحول المزيج نحو حوادث معقدة، حتى لو عولج كل نوع من الحوادث أسرع. قارن داخل أولوية وداخل خدمة، وأظهر المزيج بجوار الزمن (انظر الموضوع 3.2، حجم الحوادث وأولويتها). لا تستخلص نتائج من شهر تغير فيه المزيج.

8. استخدم حدود التحكم لفصل الإشارة عن الضجيج. تتفاوت مدد الحوادث كثيرًا من أسبوع إلى آخر دون أن يتغير شيء. يُظهر مخطط التحكم، بحدود محسوبة من فترة مستقرة، متى يكون التحول كبيرًا بما يكفي ليستحق التفسير (انظر الموضوع 1.6، الثقافة الإحصائية لمقاييس الخدمة).

اقرن السرعة بالديمومة

9. أظهر معدلي إعادة الفتح والتكرار بجوار كل مقياس زمن. معدل إعادة الفتح هو حصة الحوادث المعاد فتحها ضمن نافذة معلنة. والتكرار هو عودة الخدمة والعرض نفسيهما ضمن نافذة. إن انخفض زمن الاستعادة بينما ارتفع التكرار، فالفريق يطبق رقعًا سريعة. أرسل الحوادث المتكررة إلى إدارة المشكلات (انظر الموضوع 4.1، مقاييس إدارة المشكلات).

10. قِس الانتظار والتسليمات، لأن الوقت يذهب هناك. في معظم الخدمات، يُقضى كثير من الزمن المنقضي للحادثة في انتظار شخص أو قرار أو مورد، لا في العمل. تُظهر حصة الزمن النشط وعدد إعادات الإسناد أين تنظر. وإصلاح زمن الحل الطويل كثيرًا قاعدة توجيه أوضح أو مناوبة مشتركة، لا كتابة أسرع.

11. استخدم أهدافًا على النسب المئوية، مع إنسان في الحلقة. إن احتجت هدفًا، فاذكره التزامًا بنسبة مئوية لأولوية، مثل «تسع من كل عشر حوادث أولوية 2 تُستعاد ضمن زمن معلن»، واتفق عليه مع من سيحققونه. راجع الانتهاكات أسئلة عن النظام لا أخطاء الشخص المناوب (انظر الموضوع 5.1، مقاييس SLA وOLA وXLA).

12. اسأل المستخدمين عن التجربة. استبيان قصير على عينة من الحوادث المغلقة وقراءة التعليقات سيخبران هل يطابق الرقم إحساس الانتظار. يهتم المستخدمون كثيرًا بالتواصل في الوقت المناسب أكثر من دقيقة الاستعادة بالضبط (انظر الموضوع 6.1، مقاييس رضا العملاء).

مسارات التلاعب وحواجز الحماية

المقياس كيف يُتلاعب به حاجز الحماية أو الممارسة المقترنة
زمن الاكتشاف ضبط بداية الأثر أبعد مما كانت؛ توسيع عتبات التنبيه فتُعد أعطال أقل حوادث؛ عدّ الحوادث التي التقطها المراقب فقط حصة الحوادث التي أبلغ عنها المستخدمون أولًا بدل المراقبة؛ مراجعة دورية لتقديرات بداية الأثر مقابل بيانات المراقبة
زمن الإقرار الإسناد الآلي أو الإقرار الآلي لإيقاف الساعة؛ الإقرار بالتنبيه ثم عدم فعل شيء زمن أول استجابة وزمن الاستعادة للحوادث نفسها؛ عينة من التنبيهات المقر بها بلا نشاط لاحق
زمن أول استجابة إرسال رد نمطي أو بكلمة واحدة لإيقاف الساعة مراجعة عينة من الردود الأولى لمضمونها؛ التواصل المتكرر وتعليقات الاستبيان
زمن الاستعادة إعلان استعادة الخدمة قبل أن يستطيع المستخدمون استخدامها؛ الاستعادة بإخفاء العرض؛ تسجيل الانقطاعات صيانة مخططة التكرار ضمن نافذة؛ الأثر الذي يبلّغ عنه المستخدمون بعد وقت الاستعادة؛ حصة الحوادث المعاد وسمها بعد الواقعة
زمن الحل نقل التذاكر إلى «بانتظار العميل» أو «معلقة»؛ الإغلاق بعد محاولة تواصل واحدة؛ تقسيم حادثة إلى فروع لإغلاق الأصل مبكرًا حصة الزمن في حالات التوقف المؤقت؛ معدل إعادة الفتح؛ عمر أقدم حادثة مفتوحة؛ قراءة عينة من ملاحظات الإغلاق
عمر أقدم حادثة مفتوحة إغلاق أقدم تذكرة وإعادة رفعها؛ إعادة تصنيفها مشكلة أو طلبًا لإزالتها من القائمة اربط النسخ المكررة بالأصول وأبلِغ العمر المرتبط؛ عدد الحوادث المحولة إلى مشكلات أو طلبات في كل فترة
حصة الزمن النشط تسجيل عمل وجيز بلا معنى لتعليم الزمن نشطًا؛ الانتقال إلى حالات نشطة بلا جهد قارن الزمن النشط بنتائج مثل زمن الاستعادة؛ عينة من ملاحظات العمل
عدد إعادات الإسناد إعادة الفتح تحت الفريق نفسه بدل التمرير؛ تمرير العمل بقناة جانبية فلا تُظهر الأداة تسليمًا زمن الاستعادة ورضا المستخدم؛ ملاحظة دورية لكيفية انتقال العمل بين الفرق

القراءة السليمة تُظهر وسائط ونسبًا مئوية ذيلية تتحرك معًا، وحصة صغيرة مستقرة من الزمن الموقوف، وحوادث قليلة أبلغ عنها المستخدمون أولًا، وتكرارًا منخفضًا، وتعليقات استبيان تطابق بيانات التذاكر. عامل تحسنًا رئيسيًا يصل وحده مطالبة بمراجعة تلاعب.

المفاضلات: الإيجابيات والسلبيات

النهج نقطة القوة نقطة الضعف
متوسط زمن الاستعادة مألوف؛ رقم واحد؛ سهل التتبع تهيمن عليه حوادث طويلة قليلة؛ يخفي التغير الحقيقي؛ ضعيف للعينات الصغيرة
الوسيط مع نسبة مئوية عالية يصف التجربة النموذجية وتجربة سيئي الحظ؛ يقاوم القيم الشاذة يحتاج حوادث كافية؛ رقمان للشرح
رسم كل حادثة يُظهر الشكل الكامل والقيم الشاذة؛ صادق عند الحجم المنخفض أصعب قراءة عند الحجم العالي؛ يحتاج ميسّرًا
أهداف بحسب الأولوية توقعات واضحة؛ يدعم العقود والتصعيد يدعو إلى إعادة التصنيف وإيقاف الساعة؛ قد يدفع الجهد إلى حد الهدف
مقاييس ساعة التذكرة رخيصة ومتاحة في كل أداة ITSM تقيس التذكرة لا تجربة المستخدم؛ حساسة لسير عمل الحالات
مقاييس قائمة على الأثر قريبة مما يشعر به المستخدمون؛ تقاوم حيل التذاكر تحتاج بيانات مراقبة وخانة بداية أثر؛ أصعب تدقيقًا

الجواب العملي أن تحتفظ بساعة التذكرة لأن كل أداة تملكها، وتضيف طابع استعادة قائمًا على الأثر حيث تسمح المراقبة، وتستخدم التوزيعات للاثنين. المتوسط مقبول وصفًا تقريبيًا لمجموعة واحدة مستقرة كبيرة من حوادث متماثلة، ولا ينبغي أن يكون الرقم الوحيد على الصفحة.

أسئلة للنقاش مع فريقك

1. أي مرحلة من الحادثة تستغرق أطول عندنا، وكيف نعرف؟ ارسم الخط الزمني للحادثة على لوحة بالمراحل من بداية الأثر إلى الإغلاق. خذ آخر عشر حوادث وعلّم كم استغرقت كل مرحلة، باستخدام بيانات الأداة وذاكرة المستجيبين. على الميسّر أن يبحث عن المرحلة التي يتجمع فيها الوقت، وهي كثيرًا انتظار تسليم أو قرار لا العمل التقني. اتفقوا على أي مرحلة تستحق الاهتمام أولًا.

2. أين تبدأ ساعتنا وتتوقف، ومن قرر؟ اطلب من كل شخص قول متى يعتقد أن الحادثة «بدأت» ومتى «انتهت». ستختلف الإجابات، والاختلافات هي النتيجة. قارنوها بالخانات في الأداة وسير عمل الحالات. دوّنوا التعريفات المتفق عليها في سجل المقاييس وسجلوا حيث لا تستطيع الأداة دعمها بعد.

3. ماذا ستُظهر وسائطنا ونسبنا المئوية 95 مما يخفيه متوسطنا؟ قبل الاجتماع، احسب المتوسط والوسيط والنسبة المئوية 95 لحوادث الربع الماضي بحسب الأولوية. اعرضها جنبًا إلى جنب وارسم المدد. اسأل ماذا سيستنتج الفريق من كل منها. على الميسّر أن يلاحظ هل حادثة أو اثنتان تحركان المتوسط، وأن يناقش هل يعتقد الفريق أن الوسيط يمثل انتظار مستخدم نموذجي.

4. كم من الوقت نقضيه في الانتظار لا العمل، ولماذا؟ اختر ثلاث حوادث طويلة وتتبع تاريخ حالاتها. عُدّ الساعات في الحالات النشطة والساعات في حالات الانتظار، ودوّن من أو ما الذي كان منتظَرًا. اسأل أي انتظار يمكن تقصيره بقرار أو مسار تصعيد أوضح أو مناوبة مشتركة.

5. لو طُلب منا خفض زمن الحل بربع، فكيف سنفعل دون مساعدة المستخدمين؟ هذه مراجعة التلاعب مصغرة. اسرد كل حركة تحسّن الرقم دون تحسين الخدمة، مثل إيقاف الساعة أو الإغلاق المبكر أو إعادة وسم الأولويات. لكل حركة، اسأل هل سيلتقطها حاجز حماية. القائمة بداية عمود مسارات التلاعب وتُظهر حيث تحتاج التعريفات إلى تشديد.

6. كيف نعرف أن استعادة أسرع كانت حقيقية؟ اطلب الدليل: التكرار وإعادة الفتح وتعليقات المستخدمين وأي حادثة لاحقة بالعرض نفسه. انظر إلى تحسن حديث واحد واسأل هل صمد بعد شهر. على الميسّر توجيه المجموعة نحو الإصلاحات الدائمة. اختموا بتقرير أي مقياس ديمومة ينضم إلى اللوحة.

أربعة منظورات

فرق المنتج والتسليم

ترى فرق المنتج التي تشغّل خدماتها زمن الحوادث كلفة عمل غير مخطط يزيح العمل المخطط. تتبع كم من كل فترة تدفق تستهلكه الحوادث، وعامل الحوادث المتكررة بنود قائمة متراكمة للفريق المالك. وممارسات الإصدار التي تجعل التراجع سريعًا تقصّر الاستعادة، فزمن الحوادث مقياس تسليم جزئيًا (انظر الموضوع 2.9، العمل التشغيلي والعمل غير المخطط).

فرق الخدمة والعمليات

تملك فرق العمليات الساعات وتشعر بضغط الأهداف. وعليها نشر ورقة الساعات، وتدقيق استخدام حالات التوقف المؤقت، وإبلاغ الوسائط والنسب المئوية الذيلية بحسب الأولوية، والاحتفاظ بقائمة أسبوعية بأقدم الحوادث المفتوحة. وحمل الاستدعاء وجودة التنبيه يشكلان أزمنة الإقرار والاكتشاف، فانظر فيهما معًا (انظر الموضوع 5.7، مقاييس العمل الروتيني المرهق والمناوبة).

القيادة والحوكمة

على القادة أن يسألوا أي مرحلة أبطأ وما الذي يُفعل حيالها، لا لماذا الرقم أحمر. وعليهم توقع الإبلاغ بالنسب المئوية، ومقياس ديمومة بجوار أي مقياس سرعة، وتفسير حين تتغير التعريفات. وكثيرًا ما يعود تمويل المراقبة ودلائل التشغيل وعمل المشكلات بأكثر من الضغط على المستجيبين، لأنه يقلل التأخير الذي لا يتحكم فيه المستجيبون.

العملاء والمستخدمون

يعيش المستخدمون الانتظار وجودة التواصل وهل تعود المشكلة. ونادرًا ما يرون أسماء المراحل. أعطهم استجابة أولى صادقة، وأخبرهم ماذا يتوقعون، وحدّثهم بجدول. تعليقات استبياناتهم وتواصلهم المتكرر أفضل فحص لهل تقول ساعة التذكرة الحقيقة.

في الممارسة: مثال من إدارة الخدمات

يدير متجر تجزئة إلكتروني متوسط الحجم منصة طلبات وخدمة حسابات عملاء ونظام مستودع داخليًا. تملك فرق المنتج خدماتها وتتشارك مناوبة استدعاء مع مجموعة عمليات صغيرة. جميع الأرقام في هذا المثال توضيحية.

تضع القيادة هدفًا بـ«متوسط زمن حل أقل من أربع ساعات» لحوادث الأولوية 2. في الربع الأول تُظهر اللوحة متوسطًا قدره 3.8 ساعة، ويبدو أن الهدف تحقق. يقول موظفو المستودع إن بعض الانقطاعات تبدو وكأنها تستمر يومًا كاملًا. ترسم قائدة العمليات حوادث الأولوية 2 الإحدى والأربعين (توضيحي) للربع وتجد وسيطًا قدره ساعة ونصف ونسبة مئوية 95 قدرها 11 ساعة. تمثل ثلاث حوادث معظم الذيل الطويل.

تتتبع الحوادث الثلاث الطويلة. قضت كل منها معظم وقتها في «بانتظار المورد» أو «بانتظار العميل». وفي اثنتين، أُغلقت التذكرة وأُعيد رفعها حادثة جديدة حين «انتهكت» الأصلية، مما أعاد ضبط الساعة. وشملت ثالثة أربع إعادات إسناد بين الفرق على مدى يومين. وتُظهر عينة من ملاحظات الإغلاق أن 6 من 30 تذكرة روجعت (توضيحي) أُغلقت بعد محاولة واحدة للوصول إلى المستخدم.

يجري الفريق أربعة تغييرات. يضيفون خانة بداية الأثر وطابع استعادة إلى نموذج الحادثة. ويبلغون الوسيط والنسبة المئوية 85 و95 بحسب الأولوية، وأقدم الحوادث المفتوحة كل أسبوع. ويظهرون حصة الزمن في حالات التوقف المؤقت ومعدل التكرار على الصفحة نفسها. ويربطون التذاكر المعاد رفعها بأصولها ليستمر العمر.

في المراجعة التالية، ارتفع المتوسط الرئيسي إلى 4.6 ساعة لأن التذاكر المعاد رفعها تُحسب الآن كاملة. يشرح الفريق الارتفاع للقيادة تصحيحًا. والنسبة المئوية 95 وأقدم تذكرة مفتوحة الآن الرقمان اللذان يعملون عليهما، ويشير عدد إعادات الإسناد إلى فجوة توجيه بين خدمة الطلبات ونظام المستودع. ويتفقون على إضافة اسم مستعار مشترك للمناوبة ومراجعة الأثر خلال الربع القادم بدل وضع هدف جديد فورًا.

الأجايل والذكاء الاصطناعي والأتمتة والتحليلات

الأجايل

حلقة تغذية راجعة قصيرة بعد كل حادثة مهمة، بإشراك أصحاب المصلحة، تساعد الفريق على تحسين ساعاته. والتحذير أن أهداف زمن الاستجابة تنتج إقرارات سريعة فارغة، فاقرنها بزمن الاستعادة.

الذكاء الاصطناعي

يستطيع الذكاء الاصطناعي تسريع أول استجابة واقتراح إصلاحات وتلخيص الحوادث، مما يقصّر زمن أول استجابة بينما قد لا يتغير زمن الاستعادة. أبلِغ الاثنين، مع حصة الحوادث التي استُخدم فيها اقتراح ذكاء اصطناعي وحصة التي تكررت. والتحذير أن رد ذكاء اصطناعي سريعًا خاطئًا يضيف عملًا، فعُدّ الحوادث المعاد فتحها.

الأتمتة

احسب كل ساعة من الطوابع الزمنية للأحداث في الأداة، مع تسجيل أسباب التوقف المؤقت، وقِس التشخيص والمعالجة الآليين بالإجراءات الخاطئة كما بالوقت الموفَّر. والتحذير أن أتمتة تستعيد الخدمة دون تسجيل السبب تخفي سجل المشكلة.

التحليلات

أبلِغ الوسيط ونسبة مئوية عالية لكل ساعة مع أقدم حادثة مفتوحة، وأظهر كم حادثة خلفها. والقرار الذي يفيد فيه هو أين ينتظر المستخدمون أطول. والتحذير أن تعريفات الساعة تختلف عبر الأدوات، فاكتب حدثي البداية والتوقف قبل مقارنة الفرق.

منظور القطاعات

الشركات الناشئة. الحجم منخفض، فالنسب المئوية مضطربة ورسم كل حادثة أفضل من ملخص. كثيرًا ما يكتشف شخص واحد ويستجيب ويستعيد، فالفصل بين المراحل أقل أهمية من خط زمني مكتوب لكل حادثة. أضف ملاحظة بداية الأثر إلى كل تقرير ما بعد الحادثة، واحسب وسائط بسيطة حين تتوفر حوادث كافية.

الأعمال الصغيرة. قد يعالج الحوادث مزود خدمة مُدارة أو مختص تقنية معلومات عام واحد، وقد يحدد عقد المزود أهداف الاستجابة والحل. اقرأ ساعات العقد بعناية، لأنها كثيرًا ما تختلف عن تجربة مستخدميك. احتفظ بسجل قصير لبداية الأثر والاستعادة للحوادث المهمة، واطلب من المزود السجلات الأساسية، لأن رقم الملخص يخفي الساعات.

المؤسسات الكبرى. كثرة الفرق والموردين ومخططات الأولوية تجعل المقارنة مغرية ومضللة. وحّد تعريفات الساعات ومعاني الأولويات عبر المؤسسة، وانشر التوزيعات لا المتوسطات، وقسّم بحسب الخدمة. راقب انجراف حالات التوقف المؤقت وإعادة التصنيف، فهما ينموان بعدد طبقات الإبلاغ.

الحكومة والقطاع العام. قد تحدد العقود والإبلاغ النظامي والتدقيق الساعات وتعريفات الأولوية. أوفِ بتلك الالتزامات كما كُتبت، وأبقِ عرضًا ثانيًا موجهًا للمستخدم بجوارها، حتى لا يخفي الامتثال تجربة رديئة. كن منفتحًا بشأن التعريفات وبشأن التصحيحات حين تتغير قاعدة ساعة (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).

مبررات الأعمال: الدوافع والعائد على الاستثمار والتكلفة الإجمالية للملكية

كلفة هذا الموضوع تصميم وانضباط في معظمها. يستغرق كتابة أوراق الساعات بضع ساعات، وبعض الإعداد لإضافة خانة بداية الأثر وطابع الاستعادة، وجهدًا متواضعًا لبناء تقارير النسب المئوية. وحيث تحتفظ أداة ITSM أو منصة مراقبة بالطوابع الزمنية أصلًا، فالاستخراج مهمة لمرة واحدة. والكلفة المتكررة مراجعة شهرية وعينة ربع سنوية من الحوادث المغلقة.

يأتي العائد من قرارات أفضل وإعادة عمل أقل. يُظهر الإبلاغ بالتوزيعات هل نجح تحسين، ويوجه الإبلاغ بالمراحل الجهد إلى التأخير الحقيقي، مثل التسليمات وفجوات الاكتشاف وانتظار الموردين. وتمنع مقاييس الديمومة الوفر الكاذب للرقع السريعة التي تعود حوادث متكررة. قِس خط أساسك ربعًا، وأجرِ تغييرًا واحدًا، وقارن التوزيعات.

الأنماط المضادة والمزالق

  • MTTR واحد على لوحة المديرين التنفيذيين. متوسط البيانات المنحرفة يضلل. أظهر الوسيط ونسبة مئوية عالية وأقدم حادثة مفتوحة، وقل كم حادثة خلف كل نقطة.
  • مزج الأولويات والخدمات. تحول المزيج يبدو تغيرًا في الأداء. قسّم بحسب الأولوية والخدمة، وأظهر المزيج.
  • إيقاف الساعة بحالات التوقف المؤقت. يختفي الوقت في «بانتظار» و«معلقة». اسرد الحالات المسموحة، واشترط أسبابًا، وأبلِغ حصة الزمن في كل منها.
  • إغلاق التذاكر وإعادة رفعها. يعيد ضبط العمر ويخفي الحادثة الطويلة. اربط التذاكر المعاد رفعها بأصولها وأبلِغ العمر المرتبط.
  • استخدام طابع زمني واحد للاستعادة والإغلاق. تُكافأ الفرق حينها على الإغلاق المبكر أو تُعاقب على المتابعة الدقيقة. سجّل الاثنين وأبلِغ الاثنين.
  • ترتيب الوكلاء أو المهندسين بزمن الحل. يكافئ التذاكر السهلة والانتقاء ويثبط المساعدة والتصعيد. أبلِغ بحسب الفريق والخدمة فقط.
  • أهداف بلا مقاييس ديمومة. رقعة سريعة تفشل غدًا تبدو نجاحًا. أظهر التكرار ومعدل إعادة الفتح بجوار كل هدف.
  • معاملة العينات الصغيرة اتجاهات. نسبة مئوية 95 من حفنة حوادث تخمين. ارسم الحوادث الفردية وانتظر مزيدًا من البيانات قبل رسم خط.

نموذج النضج

البُعد 1 البدء 2 التطوير 3 التوحيد 4 الإدارة 5 التنسيق
التعريفات والساعات كل شخص يقيس بشكل مختلف؛ «زمن حل» واحد ساعات مكتوبة لبعض الفرق؛ مراحل منفصلة جزئيًا ورقة ساعات واحدة لكل المراحل، مع سرد حالات التوقف المؤقت تُراجَع التعريفات وتُسجَّل التغييرات بأسبابها تتوافق التعريفات مع الموردين والعملاء وتُنقَّح حين تكف عن الإفادة في القرارات
جودة البيانات ملاحظات يدوية؛ بداية الأثر مجهولة طوابع الأداة لتسجيل التذكرة وإغلاقها بداية الأثر والاستعادة مسجلتان للحوادث ذات الأولوية تُدقق البيانات بالعينات؛ تُعلَّم التقديرات بيانات المراقبة وITSM مضمومة تلقائيًا وموثوقة عبر الفرق
الممارسة الإحصائية المتوسط فقط يُظهر المتوسط والوسيط الوسيط ونسبة مئوية عالية بحسب الأولوية والخدمة تُستخدم حدود التحكم؛ تُقرن مقاييس الديمومة التوزيعات مرتبطة بتجربة المستخدم وتُستخدم لتقرير أين يُستثمر
الاستخدام في التحسين أرقام تُستخدم لملاحقة الأفراد يرى الفريق أرقامه يراجع الفريق أزمنة المراحل والانتظار شهريًا المراحل البطيئة تؤدي إلى عمل تحسين ممول التحسين مشترك عبر الفرق والموردين وتتطور المقاييس

قائمة التحقق

  • لكل مرحلة (اكتشاف، إقرار، استجابة، استعادة، حل) قاعدة بداية وتوقف وتوقف مؤقت مكتوبة.
  • بداية الأثر ووقت الاستعادة مسجلان في خانتين منفصلتين للحوادث ذات الأولوية.
  • تُظهر التقارير الوسيط ونسبة مئوية عالية، بحسب الأولوية والخدمة.
  • يُظهر عدد الحوادث خلف كل نقطة مبلَّغة.
  • تُسرد أقدم الحوادث المفتوحة أسبوعيًا.
  • حالات التوقف المؤقت قائمة قصيرة مسماة وتُبلَّغ حصة الزمن فيها.
  • يظهر معدل إعادة الفتح والتكرار بجوار كل مقياس زمن.
  • التذاكر المعاد رفعها مرتبطة بأصولها ليستمر العمر.
  • لا مقياس زمن يُستخدم لترتيب الوكلاء أو المهندسين الأفراد.
  • تُقرأ عينة من الحوادث المغلقة كل ربع للتحقق من الأمانة.
  • تُقرأ تعليقات استبيان العملاء بجوار بيانات التذاكر.

موجِّهات الذكاء الاصطناعي

قارن متوسط مدد حوادثنا بنسبها المئوية.

I will paste incident records for [service or team] covering [period]. Fields:
[list fields such as logged time, impact start, restore time, closed time,
priority, status history]. Compute the median, the 85th percentile, the 95th
percentile, and the mean of [stage name, for example time to restore] by
[priority], and show how many incidents sit behind each figure. Describe how far
the mean differs from the median and which incidents drive that difference. Do
not invent data or benchmark values. List your assumptions, any rows you
excluded, and anything the data could not tell you.

[paste incident data with personal data removed]

صغ ورقة ساعات لمقاييس زمن حوادثنا.

Draft a clock sheet for [team name] covering time to detect, time to
acknowledge, time to first response, time to restore, and time to resolve. Our
ITSM tool is [tool name], our monitoring is [monitoring tool], and our status
workflow is [list of statuses]. For each stage, give the start event, stop
event, pause states, time basis ([calendar or business hours]), exclusions, and
a gaming vector with a guardrail. Mark every item you had to assume and list
questions I should answer to complete the sheet. Do not invent targets.

اعثر على أين يذهب الزمن المنقضي في بضع حوادث طويلة.

Here is the status history for [number] long incidents from [service]. For each
incident, list the time spent in each status, mark the active and waiting
states using this rule: [which statuses count as active], and note every
reassignment between [teams or groups]. Report patterns across incidents, not
individuals, and suggest which stage deserves attention first. Do not guess at
causes the data does not show. List your assumptions and what extra fields
would help.

[paste status histories with personal data removed]

أجرِ مراجعة تلاعب على أهداف زمن حوادثنا.

We report [metric name] for [priority or service], defined as [definition with
start and stop events]. The target is [target] and the audience is [audience].
List realistic ways the number could improve without helping users, such as
clock pausing, early closure, relabelling, or re-raising tickets. For each way,
propose a guardrail measure or practice that would reveal it, and state how that
guardrail could itself be gamed. Do not invent benchmarks or statistics. List
your assumptions.

مهارات الذكاء الاصطناعي

  • Service Management Metrics skill: استخدمها لإيجاد المواضيع ذات الصلة وحواجز الحماية المقترنة بمقياس زمن حادثة أنت على وشك إبلاغه.
  • Service Management Metrics maintainer skill: استخدمها للتحقق من أن تغييرًا في هذا الموضوع يُبقي القالب وجدول التلاعب والإحالات متسقة.

أهم الخلاصات

  • للحادثة مراحل، ولكل مرحلة ساعتها ومالكها وعلاجها. سمِّ المرحلة التي تقيسها.
  • مدد الحوادث منحرفة، فالمتوسط يضلل. أبلِغ الوسيط ونسبة مئوية عالية وعمر أقدم حادثة مفتوحة.
  • اكتب أين تبدأ كل ساعة وتتوقف، وسجّل بداية الأثر والاستعادة منفصلين عن إغلاق التذكرة، وحدّ حالات التوقف المؤقت.
  • اقرن كل مقياس سرعة بمقياس ديمومة مثل التكرار ومعدل إعادة الفتح.
  • صف الفرق والخدمات، لا الوكلاء الأفراد أبدًا، واقرأ عينة من الحوادث المغلقة للتحقق من أمانة الأرقام.

المراجع والقراءات الإضافية

  1. Davidovič, Š., Incident Metrics in SRE: Critically Evaluating MTTR and Friends, O'Reilly Media, 2021, https://sre.google/resources/practices-and-processes/incident-metrics-in-sre/.
  2. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  3. Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018.
  4. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  5. Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
  6. AXELOS, ITIL Foundation: ITIL 4 Edition, TSO (The Stationery Office), 2019.
  7. ISO/IEC 20000-1:2018, Information technology: Service management: Part 1: Service management system requirements, International Organization for Standardization.
  8. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  9. Wikipedia, Incident management.
  10. Wikipedia, ITIL.
  11. Wikipedia, Site reliability engineering.
  12. Wikipedia, Mean time to repair.
  13. Wikipedia, Service-level agreement.
  14. Wikipedia, Log-normal distribution.
  15. Wikipedia, Median.
  16. Wikipedia, Percentile.