إنهاء التشغيل عن قصد
«حتى تنتهي المهمة» هو الخطأ الأكثر شيوعًا
أكثر العيوب تكرارًا في الجيل الأول من الوكلاء الأذكياء (Agents) شرطُ إنهاء لا وجود له إلا في التعليمات (Prompt). تقول التعليمات: استمر حتى تكتمل المهمة، ويُترك الحكم على الاكتمال للنموذج، مقيسًا على سياق لم يعد يحتوي المتطلبات الأصلية بوضوح. وما يلي ذلك مألوف: يعلن الوكيل النجاح على عمل جزئي، أو يواصل لأن هناك دائمًا شيئًا آخر يمكن التحقق منه، أو يدخل حلقة مهذّبة من إعادة التحقق مما تحقق منه سابقًا. لا شيء من هذا إخفاق للنموذج بمعنى مثير للاهتمام. إنها النتيجة المتوقعة لوضع قرار من قرارات مسار التحكم داخل نظام احتمالي. الإنهاء خاصية من خصائص بيئة التشغيل. يمكن للنموذج أن يقترح أنه انتهى؛ لكن كودك وحده يقرر أن الحلقة تنتهي.
- شرط التوقف المكتوب في التعليمات قرار تحكم مفوَّض إلى آلية أخذ عيّنات احتمالية
- ثلاث نتائج معتادة: يتوقف مبكرًا، أو لا يتوقف أبدًا، أو يدور في إعادة التحقق
- النموذج قد يقترح الاكتمال؛ وبيئة التشغيل هي التي تقرره
- كل تشغيل يحتاج إلى شرط إنهاء واحد على الأقل يقيّمه كودك
اجعل التوقف فعلًا صريحًا
أنظف آلية هي الأداة الختامية: ينهي النموذج عمله باستدعاء شيء مثل submit أو hand_back مع نتيجة منظّمة، وتنتهي الحلقة عند إجراء هذا الاستدعاء. هذا أفضل من تحليل النص النثري بحثًا عن علامات الانتهاء لعدة أسباب. فهو يمنحك مخططًا (Schema)، فيحمل الاكتمالُ المُخرَج نفسه — الإجابة، والمعرّفات التي جرى المساس بها، ودرجة الثقة، والتحفظات — بدل فقرة عليك أن تفسّرها لاحقًا. ويفصل بين الإنهاء بنجاح والاستسلام، إذا وفّرت أداة ختامية للنجاح وأخرى للتصعيد، فيتحوّل «لم أستطع فعل هذا» من إخفاق إلى نتيجة مشروعة. ويجعل نهاية التشغيل حدثًا منفصلًا قابلًا للتسجيل بدل أن تكون استنتاجًا. وكل ما يحتاجه المستدعي في النهاية يجب أن يكون حقلًا إلزاميًا في ذلك المخطط.
- الأداة الختامية تُنهي الحلقة؛ أما كشف الانتهاء من النص النثري فتخمين
- مخطط الأداة الختامية يحمل المُخرَج، لا مجرد واقعة التوقف
- وفّر أداة ختامية منفصلة للتصعيد كي يصبح الاستسلام نتيجة من الدرجة الأولى
- الحقول الإلزامية في مخطط الأداة الختامية هي وسيلتك لمنع النجاحات الفارغة
شروط يستطيع كودك التحقق منها فعلًا
حيثما كان تعريف «الانتهاء» قابلًا للتحقق آليًا، فتحقّق منه آليًا ولا تسأل النموذج. الاختبارات تنجح. السجل موجود بقيم الحقول المتوقعة. الملف قابل للتحليل. إجمالي الفاتورة يساوي مجموع بنودها. شرط الاكتمال الحتمي رخيص، ولا ينحرف أبدًا، ولا يمكن إقناعه بالعدول عن إجابته، وحيث يوجد مثله فرأي النموذج في الاكتمال تلميح في أحسن الأحوال. وحيث لا يوجد مثل هذا الشرط، فتدرّج بالترتيب: مدقّق رخيص على المُخرَج الناتج، ثم استدعاء نموذج منفصل بمعايير تقييم محددة بدل التقييم الذاتي للنموذج العامل، ثم إنسان. والتفاوت الذي يستحق أن تستوعبه هو أن النموذج الذي أنجز العمل هو أسوأ حَكَم متاح على اكتمال العمل، لأنه يقيّم فهمه هو للهدف.
- فضّل شرط اكتمال حتميًا حيثما أمكن كتابة واحد
- تدرّج بالترتيب: مدقّق، ثم فحص منفصل يُحكَّم، ثم إنسان — ولا تبدأ بالتقييم الذاتي أبدًا
- النموذج العامل هو أضعف حَكَم على اكتمال عمله
- تعريفات الانتهاء القابلة للفحص يجب أن تشكّل طريقة تحديدك لنطاق مهام الوكيل من البداية
التوقف المبكر يستحق القدر نفسه من الانتباه
الحلقات المنفلتة تنال الاهتمام لأنها تكلّف المال بشكل ظاهر، لكن التوقف المبكر أكثر شيوعًا وأشد هدوءًا بكثير. وكيلٌ طُلب منه إصلاح عملية بناء فاشلة فيصلح الخطأ الأول ويعلن النجاح. ووكيلٌ طُلب منه مطابقة قائمة فيعالج الصفحة الأولى. يبدو المُخرَج معقولًا، والتشغيل رخيصًا، ولا ينطلق أي تنبيه. عادتان تلتقطان معظم هذه الحالات. اشترط أدلة في الاستدعاء الختامي — ما العناصر التي عولجت، وما الفحوص التي أُجريت، وما الذي أعاده التحقق النهائي — كي يصبح النجاح الفارغ مرئيًا بنيويًا بدل أن يبقى مخفيًا بالبلاغة. وقِس العمل المنجز في كل تشغيل إلى جانب معدّل النجاح: انخفاض مفاجئ في عدد الخطوات أو استدعاءات الأدوات لكل تشغيل ناجح، مع ثبات معدّل النجاح، يعني عادةً أن الوكيل تعلّم إعلان النجاح أسرع، لا أنه صار يعمل بكفاءة أكبر.
- التوقف المبكر أهدأ من الحلقات المنفلتة، وشائع بالقدر نفسه على الأقل
- اشترط حقول أدلة في الاستدعاء الختامي كي يصبح النجاح الفارغ مرئيًا
- راقب الخطوات واستدعاءات الأدوات لكل نجاح — الانخفاض المفاجئ نادرًا ما يكون كفاءة
- التشغيل الرخيص ذو التقرير المعقول هو الإخفاق الذي يصمد أطول مدة أمام المراجعة