نظرة عامة والدافع

يخبرك التوافر هل تجيب الخدمة. وتخبرك السعة والأداء كم تجيب جيدًا، وكم ستستمر في ذلك مع نمو الطلب. صفحة دفع تستجيب في ثماني ثوانٍ «تعمل» بحسب معظم تعريفات التوافر و«معطلة» بحسب تعريف كل عميل. وقاعدة بيانات عند 95 في المئة من تخزينها سليمة اليوم وانقطاع الشهر القادم. يغطي هذا الموضوع المقاييس التي تسد تلك الفجوات.

تخطيط السعة (capacity planning) هو الممارسة التي تحدد الموارد التي تحتاجها خدمة لتلبية طلب متغير. وفي ITIL 4 يقع هذا في ممارسة إدارة السعة والأداء، التي تهدف إلى التأكد من أن الخدمات تحقق أداءً متفقًا عليه ومتوقعًا وتلبي الطلب الحالي والمستقبلي بكفاءة كلفة. وتصف الممارسة ذلك على ثلاثة مستويات: الأعمال (ما ستطلبه المؤسسة من خدماتها)، والخدمة (كيف تتصرف خدمة تحت الحمل)، والمكوّن (كيف يتصرف كل خادم أو قاعدة بيانات أو وصلة شبكة أو طابور). تعمل المقاييس في هذا الموضوع في الغالب على مستويي الخدمة والمكوّن، وتحتاج مدخلات من مستوى الأعمال للتنبؤ بأي شيء.

تعامل هندسة موثوقية المواقع (SRE) الكمون وحركة المرور والأخطاء والتشبع الإشارات الأربع الجديرة بالمراقبة على أي نظام موجه للمستخدم، وتربط أهداف الأداء بأهداف مستوى الخدمة (انظر الموضوع 5.2، مؤشرات SLI وأهداف SLO وميزانيات الأخطاء). وتلقى فرق الأجايل السعة سؤال تسليم: هل يستطيع الإصدار التالي حمل الحمل المتوقع، ومن يملك الجواب؟ معاملة الأداء معيار قبول، يُفحص في خط الأنابيب، تنقل الحوار أبكر.

تتكرر عدة مصطلحات في هذا الموضوع. الاستخدام (utilization) حصة سعة مورد المستخدمة خلال فاصل، مثل حصة وقت المعالج المشغول. والتشبع (saturation) مقدار العمل المنتظر لأن مواردًا مستخدمة بالكامل، مثل طول طابور التشغيل أو تراكم الطلبات. يقول الاستخدام مدى انشغال مورد. ويقول التشبع هل العمل يصطف عليه، والطوابير هي ما يشعر به المستخدمون. والكمون (latency) هو الزمن بين طلب واستجابته. والإنتاجية (throughput) هي المعدل الذي تكمل به الخدمة العمل، مثل الطلبات في الثانية. والهامش (headroom) هو الفجوة بين الحمل الأقصى الحالي والحمل الذي تتوقف عنده الخدمة عن تحقيق أهدافها. والطلب (demand) هو العمل الذي يطلبه المستخدمون والأعمال من الخدمة، وهو ليس العمل الذي تكمله: خدمة محملة فوق طاقتها تكمل أقل مما طُلب.

خاصية واحدة لخطوط الانتظار تفسر لماذا تتصرف هذه المقاييس كما تفعل. تُظهر نظرية الطوابير (queueing theory) أنه لخدمة بوصول عشوائي، ينمو زمن الانتظار ببطء بينما الاستخدام معتدل ثم يرتفع بحدة مع اقتراب الاستخدام من الكامل. وقانون ليتل (Little's law) يربط متوسط عدد الطلبات في نظام بمعدل الوصول ومتوسط الزمن الذي يقضيه كل منها فيه. مورد عند استخدام متوسط عالٍ قريب من هاوية. ويعتمد الشكل الدقيق للمنحنى على الخدمة، فاعثر عليه باختبار نظامك بـاختبار الحمل (load testing) بدل استعارة عتبة من مقالة عامة.

يحتاج الكمون عناية خاصة لأن المتوسط يخفي التجربة التي تهم. تذكر النسبة المئوية (percentile) القيمة التي تقع تحتها حصة معينة من الملاحظات: النسبة المئوية 95 (p95) هي الكمون الذي تتفوق عليه 95 في المئة من الطلبات. وكمون الذيل (tail latency) يميل إلى الهيمنة في الأنظمة حيث ينتشر إجراء مستخدم واحد إلى استدعاءات داخلية كثيرة. أبلِغ النسب المئوية بدل المتوسط وحده (انظر الموضوع 1.6، الثقافة الإحصائية لمقاييس الخدمة، والموضوع 3.3، زمن الاستجابة للحوادث وحلها، الذي يطرح الحجة نفسها لزمن الحل).

وأخيرًا، تعتمد السعة على التنبؤ (forecasting) بالطلب، وللطلب أنماط: دورات يومية ودورات أسبوعية وموسمية (seasonality) مرتبطة بالتقويم والحملات وإطلاق المنتجات. والتوسع التلقائي (autoscaling) يغير الإحساس بهذا، لأن المنصات السحابية تستطيع إضافة الموارد خلال دقائق، لكنه لا يزيل الموضوع. للتوسع التلقائي حدود وتأخر وكلفة وتبعيات لا تتوسع، مثل قاعدة بيانات أو واجهة طرف ثالث. وجانب الكلفة ينتمي إلى FinOps (انظر الموضوع 7.6، مقاييس FinOps وتكلفة السحابة).

تغطي مواضيع مجاورة حساب التوافر (انظر الموضوع 5.3، مقاييس التوافر) وتصميم التنبيه (انظر الموضوع 5.5، مقاييس جودة المراقبة والتنبيهات) وحمل المناوبة (انظر الموضوع 5.7، مقاييس العمل الروتيني المرهق والمناوبة). الموضوع هنا موارد الخدمة نفسها وأزمنة استجابتها.

المبادئ الأساسية

  • قِس التشبع كما الاستخدام. يُظهر الاستخدام مدى انشغال مورد، ويُظهر التشبع هل العمل ينتظر. يعيش المستخدمون الانتظار.
  • أبلِغ الكمون توزيعًا. استخدم النسب المئوية لكل عملية موجهة للمستخدم، وأبقِ الذيل البطيء مرئيًا. متوسط توزيع منحرف يصف تقريبًا لا أحد.
  • اربط الأهداف بتجربة المستخدم. العتبة ذات معنى حين تُتتبع إلى شيء يهتم به مستخدم أو الأعمال، لا إلى ما تصادف أن ترسمه أداة.
  • خطط بنطاقات وراجعها. التنبؤ نطاق بافتراضات معلنة. قارنه بما حدث وتعلم من الخطأ.
  • اعرف حدودك بالاختبار. السعة فرضية حتى يؤكدها اختبار حمل واقعي. كرر الاختبار بعد التغييرات المهمة.
  • صف الأنظمة، لا الأشخاص أبدًا. تنتمي هذه المقاييس إلى الخدمات والمكونات والفرق. وليست بطاقة أداء لأفراد.
  • زن الكلفة مقابل المخاطرة. السعة الاحتياطية تكلف مالًا، والسعة الناقصة تكلف العملاء. اجعل المفاضلة مرئية لتُختار لا ننجرف إليها.

تعريفات المقاييس

يسرد الجدول سبعة مقاييس. الساعات والحدود مذكورة في كل صيغة. تستخدم المقاييس القائمة على النسب المئوية نافذة ثابتة، مذكورة في السجل، وتُحسب من الملاحظات الخام أو المدرجات التكرارية، لا متوسطًا للمتوسطات أبدًا.

المقياس التعريف الصيغة الوحدة مصدر البيانات ممارسة ITIL المقابل في الأجايل التكرار
استخدام الموارد حصة سعة مورد المستخدمة خلال فاصل، مبلَّغة نسبةً مئوية عالية من سلسلة الفواصل السعة المشغولة / السعة الكلية، لكل فاصل من 1 إلى 5 دقائق؛ أبلِغ الوسيط والنسبة المئوية 95 على نافذة المراجعة؛ تُستثنى نوافذ الصيانة حيث المورد مفرَّغ نسبة مئوية مراقبة البنية التحتية ومقاييس المنصة السحابية إدارة السعة والأداء؛ المراقبة وإدارة الأحداث معايير القبول التشغيلية في تعريف الإنجاز؛ إشارات موارد SRE أسبوعي
التشبع مقدار العمل المنتظر لمورد مستخدم بالكامل طول الطابور أو طابور التشغيل أو الطلبات المعلقة أو المخنوقة، لكل فاصل؛ أبلِغ النسبة المئوية 95 وحصة الفواصل التي فيها أي انتظار؛ تُستثنى الفواصل بلا طلب عدد، أو نسبة مئوية من الفواصل قياس التطبيق والبنية التحتية عن بعد إدارة السعة والأداء؛ المراقبة وإدارة الأحداث إشارة تشبع SRE؛ حد العمل قيد التنفيذ على طابور خدمة أسبوعي
النسبة المئوية للكمون الزمن المستغرق للإجابة عن طلب لعملية واحدة موجهة للمستخدم، مبلَّغ عند الوسيط وp95 وp99 زمن الاستجابة من استلام الطلب عند الحافة إلى آخر بايت مرسل، لكل طلب ناجح؛ الطلبات الفاشلة تُبلَّغ أخطاء لا استجابات سريعة؛ قِس على نافذة متحركة ميلي ثانية سجلات موزع الحمل أو البوابة والتتبع ومراقبة المستخدم الحقيقي إدارة مستوى الخدمة؛ إدارة السعة والأداء مؤشر الكمون SLI وهدف مستوى الخدمة SLO من SRE مستمر، يُراجع أسبوعيًا
الهامش الحمل المتبقي الذي تستطيع خدمة حمله قبل انتهاك أهدافها (حمل الانهيار المختبَر أو المنمذج - الحمل الأقصى الحالي) / الحمل الأقصى الحالي؛ الذروة هي أكثر ساعة ازدحامًا في النافذة؛ حمل الانهيار هو الحمل الذي ينتهك عنده هدف الكمون أول مرة في اختبار، لا الحد الأقصى للعتاد نسبة مئوية، أو أيام عند النمو الحالي نتائج اختبار الحمل والقياس عن بعد لحركة المرور إدارة السعة والأداء؛ إدارة مستوى الخدمة المتطلبات غير الوظيفية واختبارات الأداء في خط الأنابيب شهري، وقبل الإطلاقات الكبرى
خطأ التنبؤ الفرق بين الطلب المتنبأ به والفعلي لفترة القيمة المطلقة (الذروة المتنبأ بها - الذروة الفعلية) / الذروة الفعلية، لأفق معلن؛ يُجمَّد التنبؤ عند بداية الأفق ولا يُنقَّح بعده؛ الأحداث الفريدة غير المتنبأ بها تُسرد، لا تُزال نسبة مئوية سجل التنبؤ والقياس عن بعد لحركة المرور إدارة السعة والأداء؛ التخطيط المتصل بالطلب في إدارة الخدمة المالية التنبؤ بالإصدار وخارطة الطريق؛ تنبؤ SRE بالطلب ربع سنوي
زمن انتظار السعة الزمن اللازم لإدخال سعة جديدة في الخدمة بعد قبول الحاجة تبدأ الساعة حين يُوافَق على طلب السعة وتتوقف حين تحمل السعة حركة الإنتاج؛ أبلِغ الوسيط والنسبة المئوية 85؛ الطلبات الملغاة تُستثنى أيام سجلات الطلبات في أداة ITSM وسجلات التغيير وسجلات التهيئة إدارة السعة والأداء؛ إدارة طلبات الخدمة؛ تمكين التغيير زمن الانتظار الكلي لبند قائمة المنصة المتراكمة (انظر الموضوع 2.2، زمن الانتظار الكلي وزمن الدورة وكفاءة التدفق) ربع سنوي
تغطية اختبار الأداء حصة الخدمات الحرجة التي لها اختبار حمل حديث وواقعي الخدمات الحرجة التي لها اختبار حمل ناجح أحدث من عمر معلن، على بيئة وحمل عمل ممثِّلين / الخدمات الحرجة في السجل؛ حد العمر مكتوب نسبة مئوية مخزن نتائج الاختبار وسجل الخدمات إدارة السعة والأداء؛ إدارة الإصدارات الاختبارات غير الوظيفية في خط أنابيب التسليم المستمر ربع سنوي

تجيب هذه معًا عن أربعة أسئلة: كم هي ممتلئة، وكم هي بطيئة، وكم من المجال بقي، وكم بسرعة نستطيع الاستجابة حين يتغير الجواب.

التوصيات

ابدأ بالمستخدم، ثم المورد

1. اختر العمليات القليلة التي يهتم بها المستخدمون وقِسها. للخدمة مئات نقاط النهاية وحفنة رحلات تهم، مثل تسجيل الدخول والبحث والدفع وتنزيل كشف. اتفق عليها مع مالكي المنتج والعملاء، وضع توقع كمون لكل منها. ترتبط هذه بطبيعتها بمؤشرات مستوى الخدمة (انظر الموضوع 5.2، مؤشرات SLI وأهداف SLO وميزانيات الأخطاء).

2. اقرن كل مخطط مورد بمخطط تشبع. إظهار استخدام المعالج وحده يدعو إلى الراحة الزائفة بـ«وصل إلى 70 في المئة فقط». أضف الطابور أو الطلبات المنتظرة أو عدد الخنق بجواره. حين يظهر التشبع قبل أن يبدو الاستخدام مقلقًا، تكون قد وجدت القيد الحقيقي، وكثيرًا لا يكون المورد الذي كنت تراقبه، مثل مجموعة اتصالات أو حد خيوط أو حد معدل على واجهة شريك.

3. فضّل الذيل المشغول على المتوسط الهادئ. متوسطات اليوم تمزج جوف الليل بذروة الغداء. انظر إلى أكثر الفترات ازدحامًا وسجّل تاريخ وسبب أسوأ الفواصل. سؤال التخطيط كيف تتصرف الخدمة في أسوأ ساعة متوقعة.

أبلِغ الكمون بأمانة

4. انشر النسب المئوية لكل عملية، وسمِّ النافذة. اذكر الوسيط وp95 وp99 لكل عملية مهمة على نافذة متحركة، وقل أي الطلبات مشمولة. لا تأخذ متوسط النسب المئوية عبر الخوادم أو العمليات أبدًا، لأن النتيجة لا تطابق تجربة أي مستخدم حقيقي؛ ادمج المدرجات التكرارية أو الملاحظات الخام بدلًا من ذلك. وإن كانت العينة صغيرة فقل ذلك، لأن p99 من بضع مئات من الطلبات رقم ضجيجي (انظر الموضوع 1.6، الثقافة الإحصائية لمقاييس الخدمة).

5. قِس حيث المستخدم، وكذلك حيث الخادم. تفوت توقيتات جانب الخادم الشبكة والمتصفح والجهاز. أضف مراقبة المستخدم الحقيقي أو فحوصًا اصطناعية لتميز خلفية بطيئة من الميل الأخير البطيء.

6. عُدّ الأخطاء وانتهاءات المهلة مع الكمون، لا بدلًا منه. خدمة تفشل بسرعة تبدو سريعة في مخطط الكمون، وخدمة تنتهي مهلتها تبدو بطيئة للسبب الخطأ. أبلِغ معدل الخطأ مع النسبة المئوية للكمون حتى لا يجامل فشل سريع النتيجة.

اعثر على الحدود، ثم اترك مجالًا

7. اختبر نقطة الانهيار عن قصد. شغّل اختبارات حمل تعيد تشغيل مزيجًا واقعيًا من العمليات، وارفع الحمل تدريجيًا، ودوّن أين ينتهك هدف الكمون أول مرة وأي مورد يتشبع أولًا. اختبر على بيئة تشبه الإنتاج في الجوانب المهمة، واكتب الجوانب التي لا تشبهه فيها. اختبار فاشل في مكان آمن أرخص حادثة ستملكها (انظر الموضوع 4.5، مقاييس الإصدار والنشر، لوضع الفحوص في خط الأنابيب).

8. ضع الهامش سياسة وراجعه مفاضلة. قرر كم هامشًا تحتفظ به خدمة فوق ذروتها المتوقعة، ولماذا. الخدمات الحرجة الموجهة للعملاء تبرر أكثر، والخدمات الداخلية الدفعية أقل. الرقم خيار أعمال عن الكلفة والمخاطرة، فسجّل المنطق وأعد النظر فيه حين تتغير كلفة انقطاع أو سعر السعة. لا تنسخ رقمًا من مؤسسة أخرى.

تنبأ بالطلب مع من يعرفونه

9. اسأل الأعمال عما هو قادم، واكتب التنبؤ. الحملات التسويقية والعملاء الجدد والمواعيد التنظيمية والأحداث الموسمية تغير الطلب قبل أن تُظهره حركة المرور بوقت طويل. احتفظ بسجل تنبؤ قصير بالتاريخ والافتراضات والنطاق والمالك ومصدر كل مدخل. التنبؤ المعطى نطاقًا، مثل حالة دنيا ومتوقعة وعليا، أصدق من رقم واحد وأنفع لتقرير كم يُشترى.

10. قيّم التنبؤ واستخدم الخطأ لتحسينه. بعد كل فترة، قارن التنبؤ المجمد بما حدث، باستخدام خطأ التنبؤ، واسرد أسباب الإخفاقات الكبيرة. الأسباب الشائعة حملة غير معلنة وتغير سلوك المستخدمين وتبعية تحركت. الغاية ليست خطأ صفرًا، وهو غير قابل للتحقيق، بل معرفة أي المدخلات موثوقة وتوسيع النطاق حيث لا تكون.

سهّل إضافة السعة

11. قصّر زمن انتظار السعة قبل أن تطارد الدقة. إن استغرقت السعة الجديدة أسابيع للوصول، فعليك التنبؤ بعيدًا وحمل المزيد من الاحتياطي. وإن استغرقت دقائق، تستطيع العمل أقرب إلى الحاجة. انظر إلى الخطوات بين «موافق عليه» و«يحمل حركة»، مثل المشتريات والموافقة والتهيئة والإعداد والاختبار، وأزل أطول الانتظارات أولًا (انظر الموضوع 4.3، مقاييس تمكين التغيير). وبمصطلحات ITIL هذا خيار استراتيجية سعة: قيادة الطلب أو مطابقته أو التأخر عنه؛ اختر عن وعي، لكل خدمة.

12. عامل التوسع التلقائي نظامًا يُقاس. سجّل كم مرة يُطلق التوسع، وكم تستغرق السعة الجديدة لتصبح مفيدة، وكم مرة تبلغ حدها الأقصى المكوَّن، وكم تكلف. موسِّع تلقائي مثبَّت عند حده خطة سعة فشلت أصلًا. راجع هذه مع عرض الكلفة لتُناقش الأداء والإنفاق معًا (انظر الموضوع 7.5، تكلفة الخدمة واقتصاديات الوحدة).

مسارات التلاعب وحواجز الحماية

المقياس كيف يُتلاعب به حاجز الحماية أو الممارسة المقترنة
استخدام الموارد أخذ متوسط على فواصل طويلة لإخفاء الذروات؛ عدّ السعة المحجوزة الخاملة «مستخدمة»؛ إبلاغ أهدأ الموارد فقط النسبة المئوية 95 لساعة الذروة بجوار المتوسط؛ مقياس التشبع؛ قائمة الموارد في النطاق تُراجَع مقابل خريطة الخدمة
التشبع رفع حدود الطابور بحيث لا يُبلَّغ عن شيء مرفوض أو مخنوق؛ نقل الانتظار إلى طابور آخر غير مقيس النسبة المئوية للكمون ومعدل الخطأ للعملية نفسها؛ زمن الطابور من البداية إلى النهاية لا مرحلة واحدة؛ مراجعة كل الطوابير في المسار
النسبة المئوية للكمون إبلاغ المتوسط أو الوسيط فقط؛ إسقاط الطلبات البطيئة أو الفاشلة من العينة؛ القياس من موقع داخلي سريع؛ استثناء «القيم الشاذة» p95 وp99 تظهران دائمًا؛ معدل الخطأ وانتهاء المهلة يظهر بجوار الكمون؛ مراقبة المستخدم الحقيقي تُقارن بتوقيت جانب الخادم؛ حجم العينة الخام معروض
الهامش اختيار حمل اختبار لطيف؛ اختبار بيئة أكبر من الإنتاج؛ تعريف نقطة الانهيار بأنها الحد الأقصى للعتاد حمل الاختبار يُراجَع مقابل شكل حركة الإنتاج؛ قائمة مكتوبة بالفروق بين الاختبار والإنتاج؛ يُعاد اختبار الهامش بعد التغييرات ذات الصلة
خطأ التنبؤ تنقيح التنبؤ بعد الواقعة؛ وضع نطاقات واسعة جدًا فتكون كل نتيجة «ضمن النطاق»؛ إزالة أشهر المفاجآت بوصفها «أحداثًا غير متنبأ بها» التنبؤ مجمد ومؤرخ في السجل؛ عرض النطاق يُبلَّغ مع الخطأ؛ كل حدث مستثنى يُسرد ويُراجَع
زمن انتظار السعة بدء الساعة متأخرًا بتأخير سجلات الموافقة؛ إغلاق الطلبات حين يوضع الطلب بدل حين تحمل السعة حركة؛ تقسيم الطلبات الساعة معرَّفة من الموافقة إلى حمل الحركة؛ عينة من الطلبات المغلقة تُقارن بسجلات التهيئة؛ عدد الطلبات المعاد فتحها
تغطية اختبار الأداء تشغيل اختبار تافه لادعاء التغطية؛ تقليص قائمة الخدمات الحرجة؛ إبقاء اختبار ناجح قديم في السجلات عمر الاختبار وواقعية حمل العمل مسجلان؛ قائمة الخدمات الحرجة تُراجَع مقابل كتالوج الخدمات وتاريخ الحوادث؛ تُبلَّغ الاختبارات الفاشلة كما الناجحة

القراءة السليمة تُظهر استخدامًا بدورات يومية مرئية وهامش، وتشبعًا يظهر نادرًا ولفترة وجيزة، ونسبًا مئوية للكمون مستقرة أو متحسنة في أكثر الساعات ازدحامًا، وخطأ تنبؤ معروفًا ويتقلص ببطء. العلامة الصحية أن المفاجآت تُناقش بأسبابها. وينبغي أن تثير الأرقام المثالية الارتياب، لأنها تعني عادة أن القياس لطيف.

المفاضلات: الإيجابيات والسلبيات

النهج نقطة القوة نقطة الضعف
العمل بهامش سخي يمتص المفاجآت؛ يحمي الكمون والتوافر كلفة أعلى؛ يخفي عدم الكفاءة وضعف التنبؤ
العمل بشكل رشيق مع توسع تلقائي سريع كلفة أقل؛ السعة تتبع الطلب يعتمد على سرعة التوسع وحدوده؛ قد لا تتوسع التبعيات؛ أصعب التفكير فيه أثناء حادثة
أهداف كمون بالنسب المئوية تعكس إحساس الطلبات البطيئة؛ تقاوم حيل المتوسط تحتاج بيانات وعينات أكبر؛ ضجيجية عند النسب العالية للخدمات قليلة الحركة
الكمون المتوسط أو الوسيط فقط بسيط ومستقر يخفي الذيل الذي يقود الشكاوى والتسرب
اختبارات الحمل الاصطناعية مضبوطة وقابلة للتكرار وآمنة واقعية بقدر نموذج حمل العمل والبيئة فقط
القياس عن بعد للإنتاج أساسًا يعكس السلوك الحقيقي والمزيج الحقيقي يكشف الحدود بعد بلوغها فقط؛ لا يستطيع فحص ما وراء الطلب الحالي
نماذج تنبؤ مفصلة تلتقط الموسمية والنمو تتطلب بيانات ومهارة؛ إحساس زائف بالدقة حين تضعف المدخلات
نطاقات بسيطة متفق عليها مع الأعمال سهلة الشرح والتحديث؛ تركز على الافتراضات أخشن؛ تعتمد على مدخلات صادقة من الأعمال

اختر أخف طريقة تدعم القرار. لمعظم الخدمات تكفي نظرة أسبوعية إلى استخدام ساعة الذروة والتشبع والنسب المئوية للكمون، واختبار حمل قبل التغييرات الكبرى، ومراجعة تنبؤ ربع سنوية. أضف النمذجة حيث كلفة الخطأ كبيرة.

أسئلة للنقاش مع فريقك

1. أي ثلاث رحلات مستخدم تهم أكثر، وما زمن الاستجابة الذي يتوقعه المستخدمون لكل منها؟ اطلب من المجموعة تسمية الرحلات، ثم قارن بما ترسمه اللوحات. على الميسّر الضغط نحو توقع يمكن تتبعه إلى مستخدم أو عميل، لا تفضيل هندسي.

2. أين خدمتنا قرب هاوية، وكيف نعرف؟ ابحث عن موارد مثل مجموعات الاتصالات أو حدود الخيوط أو حد معدل شريك. اسأل متى اختُبر كل منها إلى نقطة انهياره آخر مرة. إن لم يعرف أحد، فذلك أول عمل.

3. كيف نبلّغ الكمون اليوم، وماذا سيقول أبطأ واحد في المئة من المستخدمين؟ اعرض المتوسط والوسيط وp95 وp99 لعملية واحدة جنبًا إلى جنب وناقش الفجوة. اسأل أي الطلبات مستثناة ولماذا، وهل تُحتسب الطلبات الفاشلة.

4. كم هامشًا نحتفظ به، ومن اختاره، ومتى أعدنا النظر في الاختيار آخر مرة؟ ناقشوا كلفة الهامش وكلفة انقطاع في أكثر الأيام ازدحامًا. اتفقوا على تاريخ مراجعة والدليل الذي سيغير الهامش.

5. ما مدى جودة آخر ثلاثة تنبؤات للطلب لدينا، وماذا تعلمنا؟ قارن التنبؤات المؤرخة بالفعلي وأسباب الإخفاقات الكبيرة. اسأل ما الذي عرفته الأعمال ولم تتلقه العمليات. قرروا مدخلاً واحدًا يُضاف إلى سجل التنبؤ، مثل التقويم التسويقي أو جدول إطلاق.

6. لو احتجنا ضعف السعة الشهر القادم، فما الذي سيوقفنا؟ اسرد كل خطوة من الطلب إلى حركة الإنتاج وعلّم حيث تنتظر. شمل المشتريات والموافقات والترخيص والتبعيات التي لا تتوسع. على الميسّر أن يبحث عن أطول انتظار غير تقني، فهو كثيرًا موافقة أو عقد. اتفقوا على خطوة واحدة تُقصَّر وقيسوا الأثر بزمن انتظار السعة.

أربعة منظورات

فرق المنتج والتسليم

ضمّن توقع أداء في معايير قبول الميزات التي تمس المسارات المزدحمة، وشغّل اختبار حمل في خط الأنابيب حيث أمكن، وأخبر العمليات عن الإطلاقات مبكرًا. احذر من عادة معاملة الأداء مهمة «تقوية» لاحقة، تتحول عملًا غير مخطط (انظر الموضوع 2.9، العمل التشغيلي والعمل غير المخطط).

فرق الخدمة والعمليات

تملك فرق العمليات القياس عن بعد وخطة السعة والاستجابة حين يُبلغ حد. تحتاج التشبع وكمون الذيل على اللوحات التي تستخدمها فعلًا، وسجل تنبؤ مشتركًا مع الأعمال، ونتائج اختبار موثوقة. وعليها تسجيل كل حادثة متصلة بالسعة بسببها (انظر الموضوع 4.1، مقاييس إدارة المشكلات، والموضوع 3.4، مقاييس الحوادث الكبرى).

القيادة والحوكمة

يقرر القادة كم مخاطرة وكلفة تقبلها المؤسسة، وسياسة الهامش هي حيث يظهر ذلك القرار. اطلبوا النسب المئوية للكمون والهامش لكل خدمة حرجة، مع خطأ التنبؤ بجوارها، وعاملوا طلبات السعة قرارات استثمار تحمل أدلة. وعلى هيئات الحوكمة مقاومة هدف استخدام واحد على مستوى المؤسسة، يدفع كل خدمة إلى النقطة نفسها على الهاوية.

العملاء والمستخدمون

يشعر العملاء بالبطء عدم موثوقية، قبل أن يتغير أي رقم توافر بوقت طويل. اذكر الأداء بنسب مئوية عند حمل معلن، وشارك كيف تتعامل الخدمة مع فترات الذروة (انظر الموضوع 5.1، مقاييس SLA وOLA وXLA، والموضوع 6.2، اتفاقيات مستوى التجربة).

في الممارسة: مثال من إدارة الخدمات

يدير متجر تجزئة إلكتروني متوسط الحجم واجهة متجر وخدمة دفع وخدمة طلبات، يملك كلًا منها فريق منتج، مع فريق منصة يوفر البنية التحتية المشتركة. جميع الأرقام في هذا المثال توضيحية.

تُظهر مراجعة فريق المنصة الأسبوعية بحث الواجهة بوسيط كمون 180 ميلي ثانية وp95 قدره 420 ميلي ثانية، كلاهما ضمن الهدف، واستخدام معالج عند النسبة المئوية 95 لساعة الذروة قدرها 58 في المئة. قبل ثلاثة أسابيع من تخفيض مخطط، تبلّغ مسؤولة دعم أن العملاء يقولون إن الموقع «يزحف» أثناء حملات المساء. اللوحة خضراء.

ينظر الفريق في p99 للبحث في أكثر ساعات التخفيض السابق ازدحامًا فيجد 3.1 ثانية، مقابل هدف p99 قدره 1.5 ثانية. ويروي التشبع بقية القصة: تُظهر مجموعة الاتصالات بقاعدة بيانات المنتجات طلبات منتظرة في 14 في المئة من فواصل الدقيقة أثناء الذروة، بينما لم يتجاوز استخدام المعالج 60 في المئة. لم يكن القيد المعالج أبدًا. كان حد المجموعة الموضوع حين كانت الحركة ثلث اليوم.

يجري مالك المنتج وقائد المنصة اختبار حمل عند 1.5 ضعف ذروة العام الماضي، باستخدام مزيج الإنتاج من العمليات. يُظهر الاختبار انتهاك هدف p99 عند 1.15 ضعف ذروة العام الماضي، فالهامش 15 في المئة مقابل سياسة 40 في المئة للخدمات الموجهة للعملاء. ويقترح التقويم التسويقي طلبًا قدره 1.6 ضعف ذروة العام الماضي في اليوم الأول. وكان التنبؤ القديم، المجمد في السجل، قد وضع النطاق عند 1.2 إلى 1.4، وكان الخطأ مقابل تخفيض العام الماضي 22 في المئة، في معظمه من حملة بريد غير معلنة.

القرار، المسجل في سجل القرارات، من أربعة أجزاء. أولًا، رفع حد المجموعة وإضافة نسخ قراءة، وإعادة الاختبار. ثانيًا، إضافة قائمة تحقق جاهزية التخفيض إلى عملية الإصدار بحيث تصل الحملات إلى سجل التنبؤ قبل ست أسابيع على الأقل. ثالثًا، إضافة p99 وتشبع المجموعة إلى المراجعة الأسبوعية. رابعًا، الاتفاق مع المالية على كلفة السعة الإضافية لنافذة التخفيض، باستخدام توسع مجدول بدل احتياطي على مدار السنة.

بعد التغييرات، يُظهر اختبار ثانٍ هدف p99 صامدًا حتى 1.8 ضعف ذروة العام الماضي. وظهر خطر التلاعب أثناء المراجعة. اقترح متعاقد «مكسبًا سريعًا» باستثناء الطلبات الأبطأ من 5 ثوانٍ من تقرير الكمون، بحجة أنها قيم شاذة. رفض الفريق: الطلبات المستثناة كانت بالضبط العملاء الذين اشتكوا. كان حاجز الحماية إبقاء معدلات الخطأ وانتهاء المهلة بجوار كل نسبة مئوية للكمون وتسجيل حجم العينة. أثناء التخفيض بلغت ذروة p99 1.2 ثانية، وبقي تشبع المجموعة دون 1 في المئة من الفواصل، وكان خطأ التنبؤ 9 في المئة، مسجلًا في السجل مع سبب الخطأ المتبقي.

الأجايل والذكاء الاصطناعي والأتمتة والتحليلات

الأجايل

خطط السعة في دورات قصيرة مع أصحاب مصلحة المنتج، مستخدمًا التنبؤات نطاقات تتحدث مع البيانات. والتحذير أن الإفراط في التهيئة لحماية رقم رئيسي يهدر المال.

الذكاء الاصطناعي

أحمال الذكاء الاصطناعي، مثل استدلال النماذج، طلبها متغير وأحيانًا مكلف، وقد تغير ميزات الذكاء الاصطناعي أنماط الاستخدام بسرعة. تتبع النسب المئوية للكمون وكلفة الطلب لمسارات الذكاء الاصطناعي، واقرنها بجودة الإجابة. والتحذير أن الضبط للسرعة قد يخفض جودة الإجابة، فقِس الاثنين.

الأتمتة

اجمع الاستخدام والكمون تلقائيًا وأتمت التوسع ضمن حدود. وقِس التوسع بالتذبذب وبالكلفة التي يضيفها. والتحذير أن التوسع التلقائي يخفي التشبع حتى تُبلغ الحدود، فتتبع الهامش لا الحمل الحالي فقط.

التحليلات

أظهر النسب المئوية للكمون والهامش مع نطاقات التنبؤ وتاريخ خطأ التنبؤ. والقرار الذي يفيد فيه هو متى تُضاف سعة. والتحذير أن تنبؤات التاريخ القصير هشة، فاذكر الفاصل.

منظور القطاعات

الشركات الناشئة. حركة المرور صغيرة والنمو غير مؤكد، فالمقاييس الرخيصة تتفوق على المتقنة. تتبع النسب المئوية للكمون للرحلتين أو الثلاث التي تدر مالًا، وراقب التشبع على قاعدة البيانات، وأجرِ اختبار حمل بسيطًا قبل الإطلاقات. ضع تنبيه إنفاق حتى لا يصبح عيب أو ارتفاع حركة فاتورة.

الأعمال الصغيرة. الخدمات كثيرًا مستضافة أو مشتراة، فالسعة شأن مورد. اطلب من المورد تقارير الأداء والسعة كتابة، وتعلم ما يقوله العقد عن فترات الذروة، وراقب منظور العميل ببضعة فحوص اصطناعية. تتبع الهامش على النظام الذي لا تستطيع الأعمال العمل بدونه.

المؤسسات الكبرى. تتشارك خدمات كثيرة البنية التحتية، فتظهر مشكلات السعة في المكان الخطأ. استثمر في خريطة خدمة تربط الخدمات بالمكونات التي تستخدمها، وعملية تنبؤ مشتركة مع وحدات الأعمال، وتعريفات موحدة للنسب المئوية للكمون عبر الفرق. ضع سياسة الهامش بحسب حرجية الخدمة.

الحكومة والقطاع العام. يتشكل الطلب بمواعيد يحددها القانون، مثل مواعيد تقديم الضرائب ومطالبات المزايا والانتخابات، والفشل في تلك التواريخ علني. ينبغي أن تستخدم التنبؤات التقويم النظامي، وقد تحتاج السعة للذروة أن تُتعاقد عليها قبل شهور. تطيل دورات المشتريات زمن انتظار السعة، فقِسها وخطط حولها. وينبغي أن تذكر التقارير العامة لأداء الخدمة النسبة المئوية وظروف الحمل (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).

مبررات الأعمال: الدوافع والعائد على الاستثمار والتكلفة الإجمالية للملكية

للكلفة أربعة أجزاء. الأول القياس: القياس عن بعد وتخزينه. والثاني الاختبار: بيئة ممثِّلة ونماذج حمل عمل تحتاج صيانة. والثالث روتين التخطيط: الاحتفاظ بسجل التنبؤ ومراجعة الخطأ كل ربع. والرابع السعة الاحتياطية نفسها، وهي كثيرًا أكبر كلفة والأجدر بأن تُجعل صريحة.

يأتي العائد من حوادث متصلة بالسعة أقل، وقرارات أفضل عن متى يُشترى ومتى لا، وإنفاق متجنَّب على سعة تُظهر البيانات أنها غير لازمة. لا تعد بنسبة توفير مسبقًا. بدلًا من ذلك، قِس نمطك: عدد الحوادث ذات السبب المتعلق بالسعة في الربع، وحصة الذروات التي احتاجت إجراءً طارئًا، والإنفاق على سعة خاملة نسبةً إلى سياسة الهامش المتفق عليها، واتجاه خطأ التنبؤ. يعامل كتاب Google SRE الموثوقية قرارًا اقتصاديًا.

تهيمن على التكلفة الإجمالية للملكية الأشخاص وبيئة الاختبار. يستطيع فريق صغير أن يبدأ بالمراقبة الموجودة ومراجعة أسبوعية واختبار حمل واحد لأهم رحلة.

الأنماط المضادة والمزالق

  • إبلاغ متوسط الاستخدام قصة السعة. يخفي المتوسط الذروة والهاوية. أبلِغ النسبة المئوية العالية لساعة الذروة ومقياس التشبع.
  • كمون متوسط على لوحة التنفيذيين. الذيل يقود الشكاوى. أظهر p95 وp99، مع معدلات الخطأ وحجم العينة.
  • استثناء «القيم الشاذة» من الكمون. أبطأ الطلبات مستخدمون حقيقيون. أبقِها، وحقق في السبب بدل قص البيانات.
  • متوسط النسب المئوية عبر الخوادم. تصف النتيجة لا أحد. ادمج المدرجات أو الملاحظات الخام قبل حساب النسبة المئوية.
  • خطط سعة مبنية على حركة العام الماضي وحدها. يعتمد الطلب على أحداث الأعمال. أدرج تقويم الأعمال وراجع خطأ التنبؤ.
  • الاختبار في بيئة لا تشبه الإنتاج. نتيجة ناجحة تعطي ثقة زائفة. سجّل الفروق وصححها، أو اختبر في الإنتاج بأمان.
  • استخدام مقاييس السعة لترتيب المهندسين أو الفرق. الاستخدام والكمون يصفان أنظمة. راجعهما بمصطلحات تصميم الخدمة والطلب، وأبقِ الأفراد خارج الصورة.

نموذج النضج

البُعد 1 البدء 2 التطوير 3 التوحيد 4 الإدارة 5 التنسيق
قياس الاستخدام والتشبع والكمون متوسطات من قلة من الخوادم؛ تنبيهات على استخدام المعالج العالي بعض الفرق ترسم النسب المئوية للكمون والطوابير تعريفات مشتركة: نسب مئوية لكل عملية رئيسية، تشبع بجوار الاستخدام، نوافذ مكتوبة يُتتبَّع اتجاهها مقابل الأهداف، مقرونة بمعدلات الخطأ، وتُراجَع أسبوعيًا تُنقَّح التعريفات بالاشتراك مع الموردين والعملاء؛ تُوفَّق وجهتا جانب المستخدم وجانب الخادم
الحدود والهامش الحدود مجهولة حتى يقع فشل اختبارات حمل عرضية قبل الإطلاقات الكبيرة اختبارات حمل على الخدمات الحرجة مقابل سياسة هامش مكتوبة يُتتبَّع الهامش لكل خدمة ويُعاد اختباره بعد التغييرات ذات الصلة تُضبط سياسة الهامش من بيانات الكلفة والمخاطر والحوادث عبر الفرق والموردين
التنبؤ تخمينات عشوائية وقت الطلب تحتفظ الفرق الفردية بالتنبؤات في رؤوسها أو جداول بياناتها سجل تنبؤ مشترك بنطاقات ومالكين، تغذيه تقويم الأعمال يُقيَّم خطأ التنبؤ ويُراجَع، مع أسباب الإخفاقات تُبنى التنبؤات مع الأعمال والموردين؛ تتحسن المدخلات بانتظام
تسليم السعة تُضاف السعة بعد حادثة طلبات قياسية للحالات الشائعة مسار موثق من الموافقة إلى حركة الإنتاج، مع قياس زمن انتظار السعة أطول الانتظارات مستهدفة بتحسين ممول تُضاف السعة تلقائيًا ضمن السياسة؛ يُراجَع سلوك التوسع وكلفته معًا

قائمة التحقق

  • رحلات المستخدم الحرجة مسماة، لكل منها توقع كمون متفق عليه مع مالكها.
  • يُبلَّغ الكمون وسيطًا وp95 وp99 لكل عملية، مع ذكر النافذة وحجم العينة.
  • تُحسب النسب المئوية من المدرجات أو الملاحظات الخام، لا متوسطًا عبر الخوادم.
  • لكل مخطط استخدام مخطط تشبع بجواره.
  • تظهر معدلات الخطأ وانتهاء المهلة بجوار كل نسبة مئوية للكمون.
  • لكل خدمة حرجة اختبار حمل، مع كتابة فروق حمل العمل والبيئة.
  • توجد سياسة هامش لكل حرجية خدمة، مع تسجيل المنطق.
  • سجل تنبؤ مؤرخ يحمل النطاقات والافتراضات والمالكين، وتغذيه تقويم الأعمال.
  • يُراجَع خطأ التنبؤ كل ربع، مع تسجيل أسباب الإخفاقات الكبيرة.
  • يُقاس زمن انتظار السعة من الموافقة إلى حمل الحركة.
  • تُراجَع حدود التوسع التلقائي وتأخره وكلفته مع مالك الخدمة.
  • لا مقياس سعة أو أداء يُبلَّغ بحسب الفرد.

موجِّهات الذكاء الاصطناعي

راجع تقرير كمون بحثًا عن تشويه خفي.

Here is how we report latency for [operation or service]: [description of the
measurement point, the window, the statistics shown, and which requests are
included or excluded]. Our users care about [user journey or expectation].
Identify ways this report could understate the experience of the slowest users,
such as averaging, exclusion rules, sampling, or measurement location. Suggest
what to show instead and what additional data I would need. Do not invent
benchmark values or thresholds; ask me for the ones you need. List your
assumptions.

صغ خطة اختبار حمل لخدمة.

I need a load test plan for [service name]. Its main user journeys are
[journeys], its dependencies are [dependencies], and its production traffic mix
is roughly [description of mix]. The test environment differs from production
in these ways: [differences]. Propose a workload model, a ramp pattern, the
measures to record (latency percentiles, error rate, utilization, saturation),
the stop conditions, and the questions the results should answer. Do not
assume tool features or invent target values. List your assumptions and the
risks of the test.

رتّب تنبؤ طلب مع الأعمال.

I am preparing a capacity forecast for [service] covering [horizon]. Known
inputs: [historical traffic description], [business events and dates], and
[planned changes]. Draft a forecast register layout with low, expected, and high
cases, the assumptions behind each, the owner of each input, and a review
routine that scores forecast error. Suggest questions to ask [business
stakeholders]. Do not invent growth rates or seasonal factors. List your
assumptions.

اعثر على القيد الحقيقي من الأعراض.

A service shows these symptoms during peak load: [symptoms, for example slow
p99, queue growth, error types]. Utilization data: [summary of resource
utilization]. Saturation data: [summary of queues, pools, throttling].
Architecture notes: [short description]. List the resources and limits that
could be the constraint, the evidence that would distinguish between them, and
the cheapest next test for each. Do not claim a cause that the data does not
support. List your assumptions.

مهارات الذكاء الاصطناعي

  • Service Management Metrics skill: استخدمها لإيجاد الموضوع الذي يعرّف مقياس سعة أو أداء وساعاته وحاجز الحماية الذي ينتمي بجواره.
  • Service Management Metrics maintainer skill: استخدمها للتحقق من أن موضوع سعة أو أداء معدلًا يُبقي كل مقياس مقترنًا بمسار تلاعب وحاجز حماية.

أهم الخلاصات

  • قِس التشبع مع الاستخدام، لأن المستخدمين يشعرون بالطابور لا بالنسبة المئوية.
  • أبلِغ الكمون نسبًا مئوية لكل عملية، مع معدلات الخطأ وحجم العينة، ولا تأخذ متوسط النسب المئوية أبدًا.
  • اعثر على الحدود بالاختبار وضع الهامش سياسة مسجلة تزن الكلفة مقابل المخاطرة.
  • تنبأ بالطلب نطاقات مع الأعمال، وجمّد التنبؤ، وتعلم من الخطأ.
  • قصّر زمن انتظار السعة وقِس التوسع التلقائي، لتتبع السعة الحاجة.
  • صف الخدمات والأنظمة، لا الأشخاص أبدًا، وعامل الأرقام التي تبدو مثالية مطالبةً بفحص القياس.

المراجع والقراءات الإضافية

  1. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  2. Google, "Monitoring Distributed Systems," chapter in Site Reliability Engineering, 2016, https://sre.google/sre-book/monitoring-distributed-systems/
  3. Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018, https://sre.google/workbook/table-of-contents/
  4. Dean, J., and Barroso, L. A., "The Tail at Scale," Communications of the ACM, 56(2), 2013.
  5. Little, J. D. C., "A Proof for the Queuing Formula: L = λW," Operations Research, 9(3), 1961.
  6. Gregg, B., Systems Performance: Enterprise and the Cloud, 2nd edition, Addison-Wesley, 2020.
  7. Allspaw, J., The Art of Capacity Planning, O'Reilly Media, 2008.
  8. Gunther, N. J., Guerrilla Capacity Planning, Springer, 2007.
  9. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  10. AXELOS (now PeopleCert), ITIL 4 Foundation and the ITIL 4 practice guide for capacity and performance management, 2019 onwards.
  11. Wikipedia, Capacity planning.
  12. Wikipedia, Site reliability engineering.
  13. Wikipedia, Latency (engineering).
  14. Wikipedia, Throughput.
  15. Wikipedia, Queueing theory.
  16. Wikipedia, Little's law.
  17. Wikipedia, Load testing.
  18. Wikipedia, Percentile.
  19. Wikipedia, Tail latency.
  20. Wikipedia, Forecasting.
  21. Wikipedia, Seasonality.
  22. Wikipedia, Autoscaling.