قم بإطلاق أول سير عمل للذكاء الاصطناعي لديك

قبل أن تبدأ

هناك شخصان من جانبكم سيحددان نجاح هذا المشروع أو فشله: مهندس واحد لديه صلاحية الوصول إلى خط الإنتاج، ومشغل واحد يقوم بالعمل اليوم. سيستغرق الأمر ما يقارب خمس وقت عملهما لمدة ستة أسابيع. إذا لم تتمكنوا من توفير هذين الشخصين، فعليكم حل هذه المشكلة قبل أي شيء آخر. فلا يمكن لأي قدر من الخبرة الهندسية أن يعوض عن الاعتماد على التخمين في العملية.

1. 01تأكد من تعيين هذين الشخصين، كتابةً، مع مديريهم.
2. 02اتفقوا على الرقم الوحيد الذي ينبغي تغييره، ومكان قياسه حالياً.
3. 03احصل على حق الوصول للقراءة إلى عينة تمثيلية من البيانات الحقيقية، وليس إلى نسخة مُعدلة من البيانات.
4. 04حدد المكان الذي سيتم تشغيل النظام فيه: بيئة السحابة الخاصة بك، أو داخل المؤسسة، أو في بيئة معزولة شبكيًّا.

اختر أحد إجراءات العمل التي يشكو منها العامل. فالحماس الذي يبديه الشخص الذي يقوم بالعمل أهم من دعم الإدارة العليا في هذه المرحلة.

مسار عمل واحد، له بداية ونهاية يمكنك تحديدهما بوضوح. ليس «خدمة العملاء» فحسب، بل المسار المحدد بدءًا من الرسالة الواردة وصولاً إلى حل المشكلة في نظام التسجيل.

قم بتقييم المرشحين وفقًا لأربعة محاور واختر أعلى مجموع. فالحجم والتكرار هما ما يجعلان العائد حقيقيًّا؛ أما مصدر البيانات النظيف ونظام الهدف القابل للكتابة فيجعلان المشروع قابلاً للتنفيذ.

مسار العمل            الحجم  التكرار  البيانات  قابل للكتابة  الإجمالي
------------------  ------  ----------  ----  --------  -----
استلام الفواتير         5         5        4       4       18
تسجيل الموردين    3         4        2       3       12
إصدار عروض الأسعار       4         3        3       4       14

# 1 = منخفض، 5 = مرتفع. خذ الإجمالي الأعلى، وليس الطلب الأكثر إلحاحًا.

إذا حصل أفضل مرشح لديك على درجة أقل من 12، فهذا يعني أنك لست مستعدًا للبدء في التنفيذ. وهذه النتيجة أكثر أهمية من مشروع تجريبي يتعثر في الشهر الرابع.

اجلس مع المشغل وشاهد حالة حقيقية وهي تمر بكامل المسار. قم بتدوين كل خطوة، وكل نظام يتم التعامل معه، والأهم من ذلك، كل استثناء يتم التعامل معه دون تردد.

أنت تبحث عن أربعة أمور: الأماكن التي تتم فيها إعادة كتابة المعلومات، والأماكن التي يتطلب فيها اتخاذ القرار استخدام الحس السليم، والأماكن التي تتم فيها الموافقة، وما يفعله المشغل عندما تكون الحالة غير عادية. هذه القائمة الأخيرة هي ما يتسبب في وفاة الطيارين.

1. 01قم بمتابعة ثلاث حالات حقيقية من البداية إلى النهاية. لا تجرِ أي مقابلات. اكتفِ بالمشاهدة.
2. 02سجل كل خطوة على النحو التالي: المدخلات → القرار → المخرجات → النظام الذي تنتهي إليه.
3. 03اذكر الاستثناءات. اسألهم «ماذا تفعلون عندما...» حتى تنفد إجاباتهم.
4. 04حدد كل نقطة يتم فيها التعامل مع أموال أو عميل أو سجل خاضع للتنظيم. فهذه النقاط تصبح «بوابات موافقة».

توقع أن يختلف الإجراء الموثق عن الإجراء الفعلي. فالإجراء الفعلي هو المعيار المرجعي.

قبل البدء في كتابة النظام، قم بتجميع مجموعة من القضايا المصنفة من سجلك الخاص. وعادةً ما يكفي حوالي مائة قضية تم البت فيها لتكون المجموعة ذات قيمة، ويجب أن تتضمن الاستثناءات المذكورة في الخطوة الثانية.

هذه هي الأداة الأكثر تأثيرًا في المشروع. فهي توضح ما إذا كان النظام يعمل بشكل صحيح، وتكشف عن حالات التراجع في الأداء عند كل تغيير، وبما أنها تستند إلى سجلاتك الخاصة، فإنها تحسم الخلافات التي لا تستطيع معايير أداء الموردين حسمها.

⁦{"id":"INV-2291","input":{"source":"email","attachments":1},
 "expected":{"vendor":"Al Noor Trading","total":4820.00,"gl":"6100"},
 "tags":["standard"]}
{"id":"INV-2317","input":{"source":"email","attachments":3},
 "expected":{"vendor":"Gulf Logistics","total":1195.50,"gl":"6220"},
 "tags":["multi-page","exception:split-invoice"]}⁩

1. 01اختر 100 قضية تم البت فيها مؤخرًا، مع إعطاء الأولوية للقضايا المعقدة.
2. 02سجل القرار الذي اتخذه شخص عاقل، وليس ما ينبغي أن يقوله النموذج.
3. 03قم بتمييز الاستثناءات بشكل صريح حتى تتمكن من تقييمها بشكل منفصل.
4. 04حدد معيار النجاح مقارنةً بالخط الأساسي الحالي للبشر. قم بقياس هذا الخط الأساسي أولاً؛ فنادراً ما يكون مرتفعاً بالقدر الذي يفترضه الناس.

إذا لم يتمكن فريقك من إعادة تشغيل مجموعة التقييم بدونك، فهذا يعني أن عملية تسليم المهام قد فشلت بالفعل. احتفظ بها في المستودع، بحيث يمكن تشغيلها بأمر واحد.

قم بإنشاء النسخة الأبسط التي تتعامل مع البيانات الفعلية من البداية إلى النهاية. لا بأس إن كانت غير أنيقة. ما يهم هو أن يمر السجل الفعلي بالمسار الكامل في غضون أسبوعين: من المصدر، ثم يتم اتخاذ قرار بشأنه، ثم يخرج إلى مكان يمكن للإنسان رؤيته.

قم بتشغيله على مجموعة التقييم، ثم اقرأ حالات الفشل واحدة تلو الأخرى. يُشير نمط الفشل إلى ما إذا كانت المشكلة تتعلق بالمطالبة، أو بالاسترجاع، أو بالبيانات، أم أنها مشكلة من نوع «هذا لا ينبغي أن يكون ذكاءً اصطناعيًّا».

⁦$ npm run eval -- --set evals/cases.jsonl

  standard        92/94   97.9%   ✓ above bar (95%)
  exceptions      11/19   57.9%   ✗ below bar (85%)
  ---------------------------------------------
  overall        103/113  91.2%   avg $0.04 / case

  ! 6 of 8 exception failures share tag: exception:split-invoice⁩

تعد علامة الفشل المجمعة مثل تلك المذكورة أعلاه خبراً ساراً. فهي مجرد قاعدة واحدة يجب التعامل معها، وليست مشكلة عامة تتعلق بالجودة.

الآن، قم بتنفيذ ذلك. يتم إدخال الناتج إلى نظام التسجيل بشكل متكرر دون تغيير، مع توفر مسار للتراجع، ويتم تضمين بوابات الموافقة من الخطوة الثانية بشكل فعلي بدلاً من مجرد الوعد بها.

تُجرى المراجعة الأمنية بالتوازي مع هذه الخطوة، وليس بعدها. قم بتزويد المراجع بتصميم شبكة النشر، وتنسيق سجل التدقيق، ونموذج الوصول، بينما لا يزال هناك متسع من الوقت لتعديلها.

1. 01أرسل ردًا يتضمن مفتاحًا يضمن عدم تكرار البيانات، بحيث لا تؤدي إعادة المحاولة إلى إنشاء نسخة مكررة.
2. 02تسجيل كل عملية استدعاء للنموذج، واستخدام للأداة، وعملية كتابة، مع ذكر الجهة الفاعلة والتكلفة والنتيجة.
3. 03ضع «بوابة بشرية» على أي شيء يتعلق بالمال أو بالعملاء أو بالسجلات الخاضعة للرقابة.
4. 04صمم زر الإيقاف الطارئ وتأكد من أن فريقك — وليس فريقنا — هو الذي يمكنه تشغيله.

⁦POST /invoices                        # idempotent
Idempotency-Key: INV-2291-v3

{ "vendor": "Al Noor Trading",
  "total": 4820.00,
  "gl": "6100",
  "source": "momentem/intake@1.4.2",
  "decision_id": "d_8f21c",           # links to the audit record
  "requires_approval": false }

# reversal: POST /invoices/INV-2291/void { "decision_id": "d_8f21c" }⁩

إذا تعذر التراجع عن إجراء آلي في خطوة واحدة، فإنه يحتاج إلى بوابة موافقة بدلاً من الأتمتة. ولا توجد استثناءات.

ابدأ التشغيل الفعلي مع فريق واحد، في بيئة العمل الحية، مع ترك زمام الأمور بين أيديهم. وقم بتوسيع نطاقه عندما تبرر الأرقام ذلك، وليس وفقًا لما تقتضيه خطة العمل.

يُعد «التسليم» أحد المخرجات، وليس مجرد اجتماع. ويتم ذلك عندما يقوم مهندسك بنشر تغيير على النظام، بمبادرته الخاصة، وتكتشف مجموعة الاختبارات التراجعية التي أدخلها عن عمد.

1. 01فريق واحد، حركة مرور مباشرة، إمكانية الرجوع إلى الإصدار السابق متوفرة، وتم إجراء تدريبات عليها.
2. 02قارن الرقم الوارد في الخطوة الأولى أسبوعياً بخط الأساس الخاص به.
3. 03اكتب دليل التشغيل: التنبيهات، الأعطال الشائعة، ما يجب فعله في الساعة 3 صباحًا.
4. 04ابقَ في حالة استعداد حتى يتمكن مهندسك من معالجة الحادث دون الحاجة إلى الاتصال بنا.
5. 05اختبر عملية التسليم: اطلب منهم كسر شيء ما عن قصد وتأكد من أن نظام التقييم يكتشف ذلك.

في هذه المرحلة، يصبح النظام ملكًا لك بكل معنى الكلمة: فالكود موجود في مستودعك، وعمليات التقييم موجودة في نظام التكامل المستمر (⁦CI⁩) الخاص بك، والشخص الذي يقوم بإصلاحه في الساعة الثالثة صباحًا يعمل لديك.

الملحق · فحص الجاهزية

قبل الخطوة الأولى، أجب عن الأسئلة التالية بالاستناد إلى الأدلة وليس النوايا: رقم يمتلكه شخص ما، أو اسم نظام، أو مسمى وظيفي. أي شيء لا يمكنك الإجابة عنه يُعد جزءًا من نطاق العمل، وعادةً ما تكون هذه القائمة أكثر فائدة من الإجابات التي لديك بالفعل.

ما هو الرقم الوحيد الذي ينبغي أن يتغير، وما هو هذا الرقم اليوم؟بشرط أن يوافق المالك على أنها ملكه.

ما هي نسبة العمل التي تمثل المسار الروتيني؟وهذا يحدد الحد الأقصى لأي عملية أتمتة.

أين يوجد الإدخال فعليًّا؟نظام التسجيل، وليس طبقة إعداد التقارير.

هل هناك سجل مؤكد من الأهداف التي تم تسجيلها ضدهم؟عادةً ما تكون اثنا عشر شهرًا مدة كافية.

ما هو النظام الذي يجب أن تُنقل إليه النتائج، وهل يمكن الكتابة عليه؟يؤدي الهدف المخصص للاستيراد فقط إلى تغيير عملية البناء.

هل يمكن التراجع عن عملية كتابة آلية بخطوة واحدة؟وإلا، فإن الأمر يحتاج إلى بوابة موافقة.

من الذي يجب أن يوافق على ماذا؟الأموال، والعملاء، والسجلات الخاضعة للتنظيم، بشكل صريح.

هل يمكن أن تخرج البيانات من شبكتك؟وإلا: إما أن تكون في بيئة مستأجرة، أو داخل الموقع، أو معزولة شبكيًّا.

ما هي البيانات التي يجب تسجيلها، وما هي مدة الاحتفاظ بها؟وفقًا لسياستكم الخاصة، وليس سياستنا.

من يملك مجموعة التقييم بعد تسليمها؟وإذا كان الجواب هو «نحن»، فإن عملية المشاركة لم تنتهِ بعد.

نفس الخطوات الست، الموجهة نحو أنظمتكم، مع وجود مهندسين كبار إلى جانب فريقكم، وخطة تنفيذ يمكنكم تنفيذها مع أي شخص.

تحديد موعد مكالمة