مقاييس التنبؤ والتحليلات التنبؤية
التنبؤ نطاق له سجل، لا تاريخ أو رقم يُدافع عنه، لذا قِس كم مرة وقعت النتيجة الفعلية داخل النطاق المعلن، وهل كان النطاق صادقًا بشأن اتساعه، وهل اتخذ أحد قرارًا أفضل بسببه.
نظرة عامة والدافع
التنبؤ (forecasting) يقدّر كمية مستقبلية من بيانات سابقة وافتراضات معلنة. تتنبأ مؤسسات الخدمة بالطلب على الدعم، وسعة منصة، وتاريخ إنهاء عمل، واحتمال فشل تغيير، وكلفة خدمة السنة القادمة. وتمد النماذج التنبؤية، بما فيها نماذج تعلم الآلة، ذلك إلى تسجيل بنود فردية: أي بلاغ سيخرق هدفه، وأي تغيير محفوف بالمخاطر، وأي حادثة يرجح أن تتكرر.
تفشل التنبؤات والتوقعات بطرق عادية. قد لا يشبه الماضي المستقبل، لأن خدمة أو فريقًا أو أداة تغيرت. وقد تكون البيانات رقيقة أو متحيزة. وقد يكون النطاق ضيقًا جدًا، لأن رقمًا واحدًا يبدو أنفع من فاصل. وقد يُستخدم التنبؤ التزامًا، فيعمل الناس لتحقيقه أو يخفون ما يناقضه.
أعطت مواضيع سابقة تنبؤات لاستخدامات محددة: مواعيد التسليم من الإنتاجية (انظر الموضوع 2.5، مقاييس التنبؤ بالتسليم والتخطيط)، والسعة من الطلب (انظر الموضوع 5.4، مقاييس السعة والأداء)، والكلفة (انظر الموضوع 7.5، تكلفة الخدمة واقتصاديات الوحدة). ويعطي هذا الموضوع المنهج العام لقياس جودة أي تنبؤ أو توقع، وينطبق على كلها. ويغطي أيضًا النماذج التنبؤية التي تقود مخرجاتها فعلًا، حيث تقع كلفة التوقع الخاطئ على أحد.
مصطلحات مستخدمة هنا. التنبؤ النقطي قيمة متوقعة واحدة. وفاصل التنبؤ نطاق يُقصد أن يحتوي القيمة الفعلية باحتمال معلن. والمعايرة التوافق بين الاحتمال المعلن والتكرار الملاحَظ: من التنبؤات التي قالت 80 في المئة، ينبغي أن يتحقق نحو 80 في المئة. وخطأ التنبؤ الفرق بين المتنبأ به والفعلي. والتنبؤ الأساسي طريقة بسيطة، مثل «كالفترة الماضية»، تُقارن بها طريقة أعقد. والإيجابي الكاذب توقع حدث لا يقع، والسلبي الكاذب إخفاق في توقع حدث يقع. والانجراف تغير في البيانات أو في العلاقة بين المدخلات والنتائج يخفض دقة نموذج مع الزمن.
المبادئ الأساسية
- تنبأ بنطاقات واحتفظ بسجل. تنبؤ لا يُفحص أبدًا لا يتحسن.
- قارن بخط أساسي بسيط. نموذج معقد لا يتفوق على «كالفترة الماضية» لا يستحق كلفته.
- المعايرة مهمة كالدقة. تنبؤ يقول 90 في المئة ينبغي أن يصيب تسعًا من عشر.
- طابق كلفة الأخطاء مع القرار. الإنذار الكاذب والفائت لا يكلفان الشيء نفسه.
- راقب الانجراف. تتحلل التنبؤات حين يتغير العالم، فراقبها.
- التنبؤ ليس التزامًا. لا تحوله إلى هدف للناس.
تعريفات المقاييس
| المقياس | التعريف | الصيغة | الوحدة | مصدر البيانات | ممارسة ITIL | المقابل في الأجايل | التكرار |
|---|---|---|---|---|---|---|---|
| تغطية فاصل التنبؤ | حصة النتائج الفعلية التي وقعت داخل فاصل التنبؤ المعلن | النتائج داخل الفاصل / التنبؤات المقيَّمة؛ المقيَّمة هي التي نتيجتها معروفة | نسبة مئوية | سجل التنبؤات والقيم الفعلية | إدارة السعة والأداء؛ الإدارة المالية | تنبؤ بنطاقات من الإنتاجية | ربع سنوي |
| خطأ التنبؤ | الحجم المعتاد للفرق بين المتنبأ به والفعلي | وسيط الخطأ المطلق ونسبته المئوية 85، حيث الخطأ المطلق = القيمة المطلقة لـ(المتنبأ به ناقص الفعلي) / الفعلي، عبر التنبؤات المقيَّمة | نسبة مئوية | سجل التنبؤات والقيم الفعلية | إدارة السعة والأداء | مراجعة التخطيط | ربع سنوي |
| المهارة مقابل الخط الأساسي | تحسن طريقة التنبؤ على خط أساسي بسيط | 1 ناقص (وسيط الخطأ المطلق للطريقة / وسيط الخطأ المطلق للخط الأساسي) على التنبؤات نفسها | نسبة | سجل التنبؤات وسجل الخط الأساسي والقيم الفعلية | التحسين المستمر | جرّب وقارن | ربع سنوي |
| فجوة المعايرة | الفرق بين الاحتمال المعلن والتكرار الملاحَظ | لكل شريحة احتمال، القيمة المطلقة لـ(الاحتمال المعلن ناقص الحصة الملاحَظة) متوسطة عبر الشرائح؛ الشرائح التي فيها حالات أقل من عدد معلن تُبلَّغ على حدة | نقاط مئوية | سجل التنبؤات الاحتمالية والنتائج | إدارة المخاطر؛ تمكين التغيير | اجتماع مراجعة عن التقديرات | ربع سنوي |
| دقة التنبيه واستدعاؤه | لتنبيه أو درجة تنبؤية، حصة التنبيهات الصحيحة وحصة الأحداث الملتقطة | الدقة = الإيجابيات الصحيحة / (الإيجابيات الصحيحة + الإيجابيات الكاذبة)؛ الاستدعاء = الإيجابيات الصحيحة / (الإيجابيات الصحيحة + السلبيات الكاذبة) | نسبة مئوية | سجل التوقعات والنتائج | إدارة الحوادث؛ إدارة الأحداث | تعريف الإنجاز للنموذج | شهري |
| إشارة انجراف التنبؤ | ارتفاع الخطأ عبر الزمن مقارنة بفترة مرجعية | وسيط الخطأ المطلق في أحدث نافذة ناقص وسيط الخطأ المطلق في النافذة المرجعية، مع ذكر أحجام النوافذ | نقاط مئوية | سجل التنبؤات والقيم الفعلية | التحسين المستمر؛ إدارة السعة | افحص وتكيف | شهري |
| ارتباط التنبؤ بالقرار | حصة التنبؤات المذكورة في قرار مسجل | التنبؤات المذكورة في سجل القرارات / التنبؤات المنشورة | نسبة مئوية | سجل القرارات وسجل التنبؤات | التحسين المستمر؛ الحوكمة | إجراءات المراجعة | ربع سنوي |
يُحسب خطأ التنبؤ والتغطية فقط للتنبؤات التي نتيجتها معروفة، فتُستثنى التنبؤات الحديثة حتى ذلك. وتعتمد الدقة والاستدعاء على كيفية تعريف الحدث، فيُذكر تعريف الحدث، مثل «تغيير يسبب حادثة خلال 48 ساعة»، مع المقياس.
التوصيات
تنبأ بصدق
1. انشر نطاقات لا تواريخ منفردة. أعطِ فاصلًا باحتمال معلن، مثل «بين 12 و18 يوم عمل، بثقة 85 في المئة»، واشرح الافتراض وراءه. الرقم الواحد يدعو إلى التزام.
2. احتفظ بسجل تنبؤات. سجّل كل تنبؤ حين يُصنع: الكمية والقيمة أو النطاق والتاريخ والطريقة والافتراضات. أضف الفعلي حين يُعرف. بدون السجل، لا سجل أداء.
3. ابدأ بخط أساسي بسيط. قارن أي طريقة جديدة بساذجة، مثل قيمة الفترة الماضية أو متوسط حديث. إن لم تتفوق عليه طريقة معقدة بوضوح عبر الزمن، فأبقِ البسيطة.
4. اذكر الافتراضات التي ستبطل التنبؤ. تنبؤ الطلب يفترض لا إطلاق كبيرًا ولا انقطاعًا ولا مجموعة عملاء جديدة. اكتب الافتراض بجانب الرقم، ليعرف القارئ متى لا يثق به.
قِس الجودة
5. افحص التغطية والمعايرة. عُدّ كم مرة تقع النتائج داخل الفاصل. إن احتوى فاصل 85 في المئة النتيجة نصف الوقت فقط، فهو ضيق جدًا. أبلِغ المعايرة مع عدد الحالات، فالعينات الصغيرة ضجيجية.
6. اقرأ الأخطاء توزيعًا. قد يخفي وسيط خطأ 10 في المئة إخفاقات عرضية بنسبة 50 في المئة هي الأهم. أظهر نسبة مئوية عالية وأكبر الإخفاقات وراجعها.
7. طابق المقياس مع كلفة القرار. لتنبيه تنبؤي، اختر الدقة أو الاستدعاء بحسب كلفة إنذار كاذب وإخفاق. لتنبيه احتيال واقتراح توجيه منخفض المخاطر توازنان مختلفان.
8. راقب الانجراف. قارن الخطأ الحديث بفترة مرجعية وحقق في الارتفاعات. الأسباب الشائعة خدمة جديدة وعملية تغيرت وأدوات جديدة وتغير في كيفية تسجيل البيانات.
استخدم التنبؤات جيدًا
9. اربط التنبؤات بالقرارات. قل أي قرار يعلمه تنبؤ، وسجّل في سجل القرارات ما تقرر. اسحب التنبؤات التي لا يستخدمها أحد.
10. أبعد التنبؤات عن أهداف الناس. تنبؤ بحجم الحوادث يصبح حصة لمكتب الخدمة سيشوه الإبلاغ. عامل التنبؤات معلومات عن نظام.
11. أبقِ إنسانًا مسؤولًا عن التصرف بناءً على التوقعات. للنماذج التي تسجل بنودًا، سمِّ المالك والفعل المتخذ على درجة وكيف يستطيع شخص تجاوزها وكيف تُبلَّغ الأخطاء. راجع الإيجابيات الكاذبة والسلبيات الكاذبة بحالات مأخوذ منها عينات.
12. راقب التحيز والضرر. نموذج دُرب على قرارات سابقة قد يكرر تحيزها. افحص النتائج لمجموعات مستخدمين أو خدمات تنجو بصورة مختلفة، وأبلِغ ما لا يستطيع الفحص إظهاره. لا يقدم هذا الكتاب مشورة قانونية، فتحقق من الالتزامات مع مستشارك القانوني.
مسارات التلاعب وحواجز الحماية
| المقياس | كيف يُتلاعب به | حاجز الحماية أو الممارسة المقترنة |
|---|---|---|
| تغطية فاصل التنبؤ | توسيع الفواصل حتى تبدو التغطية جيدة؛ تقييم التنبؤات السهلة فقط | أبلِغ عرض الفاصل مع التغطية؛ قيّم كل التنبؤات المسجلة |
| خطأ التنبؤ | تنقيح التنبؤ قبيل النتيجة؛ اختيار نافذة التقييم | استخدم التنبؤ الأصلي المسجل؛ ثبّت النافذة مسبقًا |
| المهارة مقابل الخط الأساسي | اختيار خط أساسي ضعيف؛ ضبط الطريقة على بيانات التقييم | اتفق على الخط الأساسي مسبقًا؛ قيّم على بيانات لم تُستخدم للضبط |
| فجوة المعايرة | استخدام شرائح أو حالات قليلة؛ دمج الشرائح لإخفاء الفجوات | أبلِغ عدد الحالات لكل شريحة؛ حد أدنى لأعداد الحالات |
| دقة التنبيه واستدعاؤه | إعادة تعريف الأحداث بعد الواقعة؛ عدّ المكررات | ثبّت تعريف الحدث مسبقًا؛ أزل التكرار؛ خذ عينات من التنبيهات |
| إشارة انجراف التنبؤ | إعادة ضبط الفترة المرجعية؛ تجاهل الانجراف البطيء | ثبّت النافذة المرجعية وراجعها بجدول |
| ارتباط التنبؤ بالقرار | ذكر التنبؤات في سجل بلا أثر في القرار | اسأل ما الذي تغير؛ خذ عينات من الإدخالات |
القراءة السليمة فواصل تغطي الحصة المعلنة من النتائج دون أن تكون واسعة بصورة سخيفة، وخطوط أساسية بسيطة تتفوق عليها الطرق المعقدة بهامش واضح، وانجراف يُلاحَظ ويُحقق فيه، وتنبؤات تظهر في القرارات.
المفاضلات: الإيجابيات والسلبيات
| النهج | نقطة القوة | نقطة الضعف |
|---|---|---|
| تنبؤات خط أساسي بسيطة | سهلة الشرح والصيانة؛ يصعب فرط ملاءمتها | تفوتها الأنماط والتغيرات |
| نماذج إحصائية أو تعلم آلة | تلتقط أنماطًا أكثر؛ تتوسع عبر البنود | يصعب شرحها؛ تنجرف؛ تحتاج مراقبة وبيانات |
| تنبؤات نقطية | سهلة الإيصال | دقة كاذبة؛ تدعو إلى الالتزام |
| تنبؤات بفواصل | صادقة بشأن عدم اليقين | أصعب إيصالًا؛ قد تُقرأ غامضة |
| حكم الخبراء | يستخدم سياقًا لا يملكه النموذج | متحيز؛ يصعب تتبعه |
الخلاصة ابدأ بسيطًا، واحتفظ بالسجل، وأظهر الفواصل، وأضف التعقيد فقط حين يستحق مكانه مقابل خط أساسي. يستطيع الحكم والنماذج العمل معًا إن سُجل الاثنان وفُحصا.
أسئلة للنقاش مع فريقك
1. ما آخر تنبؤ صنعناه، وكيف انتهى؟ معظم الفرق لا تعرف، لأن التنبؤات لا تُسجَّل. اطلب الرقم والافتراض والفعلي. لاحظ هل جاءت المفاجأة من البيانات أم الافتراض. تابع ببدء سجل تنبؤات بهذا المثال.
2. أي تنبؤ نعامله التزامًا، ومن يدفع حين يخطئ؟ ابحث عن تنبؤات أصبحت أهدافًا، مثل مواعيد التسليم أو أرقام الحجم. اسأل من يشعر بالضغط وماذا يفعل. ناقشوا النطاقات واللغة المستخدمة لإيصالها. تابع بإعادة كتابة التزام واحد نطاقًا مع افتراضات.
3. هل يتفوق نموذجنا التنبؤي أو أداتنا على «كالفترة الماضية»؟ اطلب المقارنة لا ادعاء المورد. كثيرًا لا تملك الفرق خطًا أساسيًا. ناقشوا كيف تقارنون بعدل على الحالات نفسها. تابع بتشغيل الخط الأساسي بجانبه ربعًا.
4. ماذا يكلفنا إنذار كاذب، وماذا يكلفنا إخفاق؟ هذا يحدد التوازن بين الدقة والاستدعاء. اطلب أمثلة حقيقية. الكلف كثيرًا مختلفة لأشخاص مختلفين، مثل مهندس مناوب وعميل. تابع بالاتفاق على أي خطأ يهم أكثر.
5. ما الذي سيجعل تنبؤاتنا تتوقف عن العمل، وهل سنلاحظ؟ ناقشوا تغييرات مثل منتج جديد أو أداة جديدة أو طريقة مختلفة لتسجيل البيانات. اطلب الإشارة التي ستُظهر الانجراف. تابع بإضافة فحص انجراف ومالك.
6. من يتصرف بناءً على توقع، وهل يستطيع قول لا؟ للبنود المسجلة، اسأل من يقرر ما يحدث. ابحث عن أفعال آلية بلا تجاوز. ناقشوا كيف تُبلَّغ الأخطاء وتُصحح. تابع بكتابة قاعدة التجاوز.
أربعة منظورات
فرق المنتج والتسليم
تنبأوا من تاريخكم الخاص وأعطوا نطاقات. سجّلوا التنبؤات وقارنوها بالفعلي، وعلّموا التغييرات التي تجعل التاريخ دليلًا رديئًا، مثل أداة جديدة أو تغير فريق. أبقوا أرقام التخطيط المحلية للفريق خارج المقارنات بين الفرق.
فرق الخدمة والعمليات
تساعد تنبؤات الطلب والسعة والحوادث في التوظيف والوقاية. استخدموها للتخطيط، لا لوضع حصص. راقبوا نماذج التنبيه التي ترفع الضجيج، وأبلغوا الإيجابيات الكاذبة ليمكن ضبط النماذج.
القيادة والحوكمة
اطلبوا السجل خلف التنبؤ، لا قيمته فقط، والفاصل. تجنبوا تحويل التنبؤات إلى أهداف للناس. وللنماذج التنبؤية المستخدمة في العمليات، اطلبوا المالك وقاعدة التجاوز وفحص التحيز.
العملاء والمستخدمون
تشعرون بأثر التنبؤات انتظارًا وانقطاعات وقرارات تُتخذ عنكم. اسألوا كيف تُفحص التوقعات التي تؤثر فيكم وكيف تستطيعون الاعتراض على واحد. بلاغاتكم عن نتائج خاطئة جزء من الملاحظات التي يحتاجها النموذج.
في الممارسة: مثال من إدارة الخدمات
يتنبأ مكتب خدمة تقنية المعلومات في وكالة حكومية إقليمية بحجم البلاغات الأسبوعي لتخطيط التوظيف. الأرقام في هذا المثال توضيحية. تعرض أداة من مورد تنبؤ تعلم آلة، ويريد المدير معرفة هل يعتمده.
يبدأ الفريق سجل تنبؤات. لعشرة أسابيع يسجلون ثلاثة تنبؤات لكل أسبوع: التنبؤ النقطي للمورد، وخط أساسي ساذج (متوسط آخر أربعة أسابيع)، ونطاق من أخطاء الخط الأساسي الحديثة. بعد ذلك يحسبون خطأ التنبؤ لكل منها. وسيط خطأ المورد 11 في المئة والخط الأساسي 13 في المئة، فالمهارة مقابل الخط الأساسي 15 في المئة. والنسبة المئوية 85 لخطأ المورد 38 في المئة، مع إخفاقات كبيرة في أسابيع بإعلانات من الوكالة، لا توجد في البيانات التي تستخدمها الأداة.
يعتمد الفريق تنبؤ المورد مدخلًا واحدًا، ويضيف حقلًا للأحداث المعروفة، وينشر نطاقًا مبنيًا على الأخطاء السابقة. تغطية فاصل التنبؤ للنطاق المعلن 85 في المئة نحو 80 في المئة على الأسابيع العشرة، بعدد صغير، فيبلّغونها مع التحفظ أن عشر حالات قليلة. ويضعون أيضًا فحص انجراف يقارن آخر ثمانية أسابيع من الخطأ بالأولى.
يظهر خطر تلاعب. يلاحظ قائد فريق أن التنبؤ يُستخدم لتحديد التوظيف ويقترح إضافة هامش إلى التنبؤ ليبدو الفريق موظفًا جيدًا. يبقي الفريق التنبؤ صادقًا ويسجل هامش التوظيف قرارًا منفصلًا. ما يبقى صعبًا: الأحداث التي لا تراها الأداة ما زالت تسبب إخفاقات كبيرة، وعشرة أسابيع من البيانات لا تكفي للحكم على المعايرة. والخطة المراجعة مرة أخرى بعد فترة أطول.
الأجايل والذكاء الاصطناعي والأتمتة والتحليلات
الأجايل
تتيح دورات التخطيط القصيرة للفريق فحص التنبؤات كثيرًا وتنقيحها مع أصحاب المصلحة. ممارسة جيدة التنبؤ بنطاقات من إنتاجية الفريق نفسه ومراجعة السجل في حوار التحسين المنتظم. والتحذير أن تنبؤًا يُعامل وعدًا يقود إلى التضخيم أو الإخفاء أو تقسيم العمل.
الذكاء الاصطناعي
تستطيع نماذج تعلم الآلة ومساعدو الذكاء الاصطناعي إنتاج تنبؤات ودرجات مخاطر، بمظهر الدقة. قارنها بخط أساسي، وأبقِ مالكًا، وافحص المعايرة ومعدلات الإيجابيات والسلبيات الكاذبة بالعينات، وأبقِ إنسانًا مسؤولًا عن الأفعال المتخذة بناءً على درجة (انظر الموضوع 10.5، مقاييس حوكمة الذكاء الاصطناعي ومخاطره). والتحذير أن تنبؤًا مولدًا بالذكاء الاصطناعي قد يعطي رقمًا واثقًا بلا فاصل ولا افتراضات معلنة، فاطلب الاثنين.
الأتمتة
أتمت تسجيل التنبؤات وجمع القيم الفعلية وحساب الخطأ والتغطية، ليبني السجل نفسه. وقِس الأفعال الآلية التي تتبع توقعًا بأفعالها الخاطئة. والتحذير أن الأتمتة التي تتصرف بناءً على تنبؤ، مثل توسيع السعة أو الاستدعاء، تجعل أخطاء التنبؤ مرئية للمستخدمين، فأضف حدودًا ومراجعة.
التحليلات
هذا الموضوع هو تحليلات التنبؤات: أظهر الخطأ توزيعًا، والتغطية بالأعداد، والانجراف بالنافذة المستخدمة. والقرار الذي يفيد فيه هو كم تثق بتنبؤ ومتى تستبدل الطريقة. والتحذير أن العينات الصغيرة تعطي معايرة غير مستقرة، فاذكر عدد التنبؤات خلف كل رقم (انظر الموضوع 10.8، مقاييس التحليلات وجودة البيانات).
منظور القطاعات
الشركات الناشئة. التاريخ قصير والخدمة تتغير كثيرًا، فالتنبؤات ضعيفة. استخدم خطوطًا أساسية بسيطة ونطاقات واسعة، وأبقِ سجلًا قصيرًا. تجنب شراء أدوات تنبؤ قبل وجود بيانات.
الأعمال الصغيرة. الموسمية وبضعة عملاء كبار تهيمن. استخدم الفترة نفسها من السنة الماضية خطًا أساسيًا، ودوّن الأحداث التي تكسر النمط. احذر تنبؤات المورد التي تدّعي الدقة.
المؤسسات الكبرى. التنبؤات الكثيرة عبر الفرق تحتاج سجلًا وتعريفات مشتركة. قارن الطرق بعدل عبر الفرق وتجنب ترتيب الفرق بدقة التنبؤ. راجع النماذج للانجراف بجدول.
الحكومة والقطاع العام. كثيرًا تدعم التنبؤات قرارات ميزانية وتوظيف عامة. وثّق الطرق والافتراضات، وافحص قواعد القرارات الآلية التي تؤثر في الأشخاص. خطط لأحداث خارجية مثل تغيرات السياسات تكسر البيانات (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).
مبررات الأعمال: الدوافع والعائد على الاستثمار والتكلفة الإجمالية للملكية
الكلف هي عمل البيانات وتسجيل التنبؤات وأدوات النمذجة إن استُخدمت ووقت المراجعة ومراقبة النماذج للانجراف. البدء بسجل وخط أساسي ساذج يكلف قليلًا جدًا.
العائد تخطيط أفضل: سعة تصل قبل الحاجة وتوظيف يطابق الطلب ومفاجآت أقل. يصعب إسناده، فتجنب ادعاء رقم. قارن كلفة طريقة تنبؤ وخطأها بالخط الأساسي عبر الزمن، واذكر الافتراضات نطاقات (انظر الموضوع 7.7، العائد على الاستثمار ومبررات الأعمال). وجانب المخاطر كلفة الإفراط في الاعتماد على نموذج انجرف، وقرارات تُتخذ على دقة كاذبة.
الأنماط المضادة والمزالق
- تنبؤات برقم واحد تُعامل وعودًا. تنتج تضخيمًا ولومًا. انشر نطاقات مع افتراضات.
- لا سجل تنبؤات. لا طريقة للتعلم. سجّل التنبؤات والقيم الفعلية.
- شراء نموذج بلا خط أساسي. المكسب مجهول. قارن بـ«كالفترة الماضية».
- الحكم على الدقة بيانات التدريب. تجامل النموذج. قيّم على بيانات لاحقة.
- تجاهل الإيجابيات الكاذبة. التوقعات الضجيجية تدرب الناس على تجاهلها. أبلِغ الدقة والاستدعاء.
- التنبؤات أهدافًا للناس. تشوه البيانات. استخدمها للتخطيط.
- لا فحص انجراف. تتحلل النماذج بصمت. راقب الخطأ عبر الزمن.
- توقعات بلا مالك بشري. الأفعال الخاطئة بلا من يجيب. سمِّ مالكًا وقاعدة تجاوز.
نموذج النضج
| البُعد | البدء | التطوير | التوحيد | الإدارة | التنسيق |
|---|---|---|---|---|---|
| ممارسة التنبؤ | أرقام منفردة؛ لا سجل | بعض النطاقات؛ ملاحظات غير رسمية | سجل تنبؤات بنطاقات وافتراضات وقيم فعلية | الخطأ والتغطية والخط الأساسي تُقارَن بإيقاع | التنبؤات والطرق تتحسن بالتجارب وتُشارك عبر الفرق |
| النماذج التنبؤية | ادعاءات الموردين مقبولة | تجربة مقارنة بخط أساسي | مالك وتقييم وقاعدة تجاوز لكل نموذج | الانجراف والدقة والاستدعاء مراقَبة | دورة حياة النموذج مُدارة بإشراف وسحب |
| الاستخدام في القرارات | التنبؤات التزامات | التنبؤات تُعرض على صناع القرار | التنبؤات مرتبطة بالقرارات في سجل | القرارات تُراجَع مقابل نتائج التنبؤ | القرارات تتكيف مع عدم يقين التنبؤ |
قائمة التحقق
- سجل تنبؤات يسجل الكمية والقيمة أو النطاق والتاريخ والطريقة والافتراضات.
- تُضاف القيم الفعلية ويُبلَّغ خطأ التنبؤ توزيعًا.
- خط أساسي بسيط يعمل بجانب أي تنبؤ معقد.
- تغطية الفاصل مبلَّغة مع عرض الفاصل وعدد الحالات.
- التنبيهات التنبؤية تبلّغ الدقة والاستدعاء مقابل تعريف حدث ثابت.
- الانجراف يُفحص مقابل نافذة مرجعية ثابتة.
- لكل نموذج تنبؤي مالك وقاعدة تجاوز وتاريخ مراجعة.
- التنبؤات مرتبطة بالقرارات في سجل قرارات.
- لا تُستخدم التنبؤات أهدافًا فردية.
- لكل مقياس مسار تلاعب وحاجز حماية معروضان بجانبه.
موجِّهات الذكاء الاصطناعي
صمم سجل تنبؤات وخطًا أساسيًا.
We forecast [quantity] for [purpose]. Our data is [description of history and
source]. Propose a forecast log with fields, a simple baseline method, and how to
compute error and interval coverage later. Do not invent expected accuracy.
Mark assumptions, and list questions I should answer about the data.
قيّم طريقة تنبؤ مقابل خط أساسي.
Below are logged forecasts and actuals for [period]: [paste data without personal
information], with a baseline forecast alongside. Compute the median and 85th
percentile of absolute percentage error for each, interval coverage if intervals
are given, and the skill against the baseline. Do not extrapolate beyond the
data. State the number of cases, say what you could not judge, and list your
assumptions.
راجع إشراف نموذج تنبؤي.
We use a model that [describes what it predicts and what action follows]. Draft
a review of its oversight: owner, evaluation evidence we should ask for, how
errors are reported, the override rule, drift checks, and questions about bias.
Do not make claims about legal requirements; list questions for our legal
adviser. Mark assumptions.
راجع خطر التلاعب بمقاييس التنبؤ.
We report these forecast measures: [paste measures and definitions]. Context:
[team size, tools, audience]. For each measure, list realistic ways it could look
better without improving forecasts, propose a guardrail, and say how that
guardrail could be gamed. Do not invent benchmark values. List your assumptions.
مهارات الذكاء الاصطناعي
- Demand forecasting: استخدمها لبناء تنبؤ طلب بنطاقات وفحصه.
- Trend analysis: استخدمها لفحص الاتجاهات والتغيرات قبل التنبؤ.
- Machine learning model card: استخدمها لتوثيق غرض نموذج تنبؤي وبياناته وحدوده.
- Service Management Metrics skill: استخدمها لإيجاد الموضوع الذي يغطي مقياسًا وحاجز حمايته المقترن.
أهم الخلاصات
- التنبؤ نطاق له سجل، فسجّل التنبؤات وقارنها بالفعلي.
- قارن أي نموذج بخط أساسي بسيط، وأبقِ المعقد فقط إن تفوق عليه بوضوح.
- افحص تغطية الفاصل والمعايرة مع عدد الحالات خلفها.
- اختر الدقة أو الاستدعاء بحسب كلفة الإنذار الكاذب والإخفاق.
- لا تحول التنبؤات إلى أهداف للناس، وأبقِ إنسانًا مسؤولًا عن الأفعال المتخذة بناءً على توقع.
المراجع والقراءات الإضافية
- Wikipedia, Forecasting.
- Wikipedia, Prediction interval.
- Wikipedia, Machine learning.
- Wikipedia, Concept drift.
- Wikipedia, Precision and recall.
- Wikipedia, Capacity planning.
- Hyndman, R. J., and Athanasopoulos, G., Forecasting: Principles and Practice, 3rd edition, OTexts, 2021, https://otexts.com/fpp3/