الفئة
مهام تمثيلية متعددة الخطوات ذات قيود مستمرة، بما في ذلك سير عمل يستخدم الأدوات ووكلاء LLM.
كل المشاريع
يبحث عن شريك
هل يعزّز تكرار التعليمات التزام نماذج LLM بالمتطلبات تحت ضغط السياق؟
نختبر ما إذا كان التكرار الاستراتيجي للقيود أو إبرازها بصورة منظمة يحسّن الالتزام في مهام LLM الطويلة ومتعددة الخطوات والمستخدمة للأدوات، من دون زيادة جوهرية في عدد الرموز.
الفرضية
سيؤدي تعزيز التعليمات الحرجة عند نقاط القرار إلى رفع الالتزام بالمواصفات بما لا يقل عن 8 نقاط مئوية، مع زيادة لا تتجاوز 5% في إجمالي الرموز.
المقياس الأساسي
نسبة المهام التي تستوفي جميع القيود الحرجة المحددة مسبقاً.
العتبة ذات المعنى
+8 نقاط مئوية في الالتزام بالتعليمات مع زيادة لا تتجاوز 5% في الرموز.
الهدف التجاري
سلوك أكثر موثوقية لنماذج LLM والوكلاء من دون إعادة تدريب أو زيادة جوهرية في تكلفة الاستدلال.
قواعد القرار
تحقق عتبتا التحسن والتكلفة
الانتقال إلى تكرار أوسع عبر عدة نماذج وتجربة منتج محدودة.
يتحسن الالتزام لكن ميزانية الرموز تُتجاوز
تحسين وتيرة تعزيز التعليمات ومواضعه.
لا يوجد تحسن ذو معنى
عدم اعتماد تكرار التعليمات كآلية عامة للموثوقية.
النتائج التجارية هي أهداف بحثية وليست ضمانات. وقد تخلق النتيجة الصفرية أو السلبية قيمة كبيرة عبر منع الاستثمار في منتج أو ميزة أو حملة غير فعّالة.
التدخل
إعادة عرض التعليمات الحرجة أو إبرازها بنيوياً عند حدود سياق مختارة مسبقاً.
المقارنة
المهمة نفسها مع تقديم كل تعليمة مرة واحدة فقط في موضعها الأصلي.
المقاييس الثانوية
دقة المهمة · إجمالي الرموز · زمن الاستجابة · معدل الفشل لكل قيد