التركيز على السلوك، وليس على الصحة فحسب
ستبدو معدلات وقت التشغيل وزمن الاستجابة ومعدل الأخطاء كلها على ما يرام حتى خلال أسوأ حوادثك. فهذه هي المؤشرات التي تتغير.
- معدل التجاوز حسب الفئة
- أفضل مؤشر منفرد متاح لديك. فحدوث تغيير جذري يعني أن النظام ومشغليه قد بدأوا في الاختلاف، وهذا هو ما يبدو عليه الأمر عندما تسوء الأمور.
- توزيع الثقة
- انتبه إلى الشكل، لا إلى المتوسط. إن تسطح التوزيع ثنائي الأطراف هو مؤشر على اقتراب الانحراف.
- توزيع المخرجات
- إذا كان 5% من الفواتير يُوجه عادةً إلى رمز معين، وأصبح النسبة اليوم 30%، فإن ذلك يُعد حادثةً بغض النظر عما تقوله مقاييس الدقة.
- معدل الامتناع عن التصويت
- إن انخفاض أحد النماذج بشكل مفاجئ يشير إلى حدوث تغيير في المراحل السابقة.
- التكلفة لكل حالة
- عادةً ما تعني «القفزة» وجود حلقة إعادة محاولة أو ظهور مطالبة إضافية. وكلاهما يمثلان أخطاءً في البرنامج.
- عمر قائمة الانتظار الاستثنائية
- لأن نمط الفشل في نظام البوابات هو قائمة انتظار لا يقوم أحد بإفراغها.
دليل الإجراءات، الذي كُتب لشخص آخر
الشخص المناوب لم يقم بتطوير هذا البرنامج. اكتب البرنامج نيابة عنه، واختبره من خلال جعله يستخدمه.
- بالنسبة لكل تنبيه: ما يعنيه في جملة واحدة، والأسباب الثلاثة الأكثر احتمالاً مرتبةً حسب الأرجحية، وأول شيء يجب التحقق منه.
- كيفية إيقافه، بما في ذلك أوضاع التشغيل المحدودة، ومن يحق له ذلك.
- كيفية العثور على القرارات التي اتُخذت خلال الساعة الماضية وقراءتها. هذه هي الخطوة التشخيصية الأولى في كل حادثة تتعلق بالذكاء الاصطناعي تقريبًا.
- صفحة حالة المزود، وكيفية التمييز بين الأعطال التي يتعرض لها المزود وتلك التي تتعرض لها أنت. هذا هو أكثر حالات الالتباس شيوعًا في الساعة الثانية صباحًا.
- من يجب إيقاظه، وفي أي مرحلة، بالاسم.
يتم اختبار دليل التشغيل عن طريق تسليمه إلى شخص لم يسبق له أن رأى النظام من قبل، وطلب منه التعامل مع تنبيه ما. وأي نقطة يتوقف عندها تُعتبر ثغرة، وليست مشكلة تتعلق بالتدريب.
الحوادث التي تنطبق تحديدًا على هذا الأمر
- تدهور أداء المزود
- ليس تعطلًا، بل مجرد تباطؤ أو تدهور طفيف في الأداء. قد لا ينطلق تنبيه زمن الاستجابة. راقب مؤشرات الجودة وقم بإعداد نموذج بديل قبل أن تحتاج إليه.
- التغيير الصامت في الطراز
- تحرك اسم مستعار متغير تحتك. ولهذا السبب يُعد تثبيت الإصدارات أمرًا مهمًا. العرض: تغير السلوك دون إجراء أي نشر.
- انحراف الإدخال
- قام أحد الموردين بتغيير نموذج فاتورته. ولا تتأثر الدقة إلا بالنسبة له، لذا فإن الإحصائيات الإجمالية تخفي هذا التغيير. أما المقاييس الخاصة بكل مصدر على حدة فتكشف عنه.
- الحقن الفوري
- محتوى يوجه النموذج. الأعراض: استدعاءات للأدوات لا معنى لها في هذه الحالة. تنبيه بشأن تسلسلات غير معتادة للأدوات.
- عاصفة "ريتري"
- فشل مؤقت تفاقم ليصبح عبئًا وإنفاقًا مستمرين. الأعراض: ارتفاع تكلفة كل حالة في حين أن الحجم يظل ثابتًا.
تسليمها بالطريقة الصحيحة
تنتهي مهامنا عندما يصبح فريق العميل قادراً على إدارة الأمر دون الحاجة إلينا. وهذا يُعدّ أحد النتائج المتوقعة، إما أن يتحقق بشكل متعمد أو لا يتحقق.
- إنهم يحملون جهاز الاستدعاء منذ الأسبوع الأول من الإنتاج، ونحن بجانبهم. أما المتابعة بعد انتهاء العملية فلا تفيد في شيء.
- يقومون بتشغيل مجموعة التقييم على أجهزتهم، ضمن بيئة التكامل المستمر (CI) الخاصة بهم، ويمكنهم الاطلاع على النتائج.
- يقومون بإجراء التعديل الأول على النص، بينما نقوم نحن بالمراجعة بدلاً من الكتابة.
- إنهم يتعاملون مع حادثة حقيقية بينما نحن لا نزال هناك، لذا فإن دليل الإجراءات يُثبت فعاليته عمليًّا وليس مجرد افتراض.
- آخر ما نقوم به هو عقد جلسة حول الأمور التي قد تثير قلقنا في المستقبل. وعادةً ما تكون هذه الساعة هي الأكثر قيمة خلال فترة العمل معنا.
هل تريد أن ننفّذ هذا معك؟
التدقيق هو هذه المنهجية موجّهة إلى أنظمتك، وفي نهايته خطة بناء مُسعّرة.
تحديد موعد مكالمةاقرأ بعد ذلك
مفاتيح الرجوع إلى الإصدار السابق وإيقاف التشغيلسيتعين عليك إيقافه في الساعة 2 صباحًا. حدد الآن من يمكنه القيام بذلك، وماذا سيحدث بالنسبة للعمل أثناء الرحلة.7 دقيقةضوابط التكلفة التي تُحافظ على الاستقرارالتخزين المؤقت، والتوجيه، والحدود القصوى. مصدر الفاتورة الفعلي، مع قياسه.7 دقيقةتوجيه الاستثناءاتتلك النسبة البالغة 10٪ التي لا يمكن أتمتتها تمثل 90٪ من التصميم التشغيلي.8 دقيقة