ترتيب البرمجة x لم يتبع التعليمات

إخفاقات الفئات في AI BENCHY

اكتشف أي نماذج الذكاء الاصطناعي هي الأكثر عرضة لظهور لم يتبع التعليمات في البرمجة، حتى ترصد نقاط الضعف بسرعة أكبر.

النماذج المعروضة

إجمالي الإخفاقات

النموذج الأكثر تأثرًا

أسباب الفشل

إجابة خاطئة120 لا توجد إجابة18 لم يتبع التعليمات16 انتهت المهلة12 تنسيق إضافي7 خطأ API6

الفئات

حل الألغاز84 الذكاء العام74 حيل مضادة للذكاء الاصطناعي29 البرمجة16 اتباع التعليمات14 استدعاء الأدوات6 خاص بالمجال1 مجمّع1

الترتيب	النموذج	الشركة	عدد لم يتبع التعليمات	درجة الفئة	اختبارات صحيحة	زمن الاستجابة (المتوسط)
#153	Granite 4.1 8B none	IBM Granite	1	5.2	0/2	706ms

أفضل النماذج حسب عدد لم يتبع التعليمات