التنقل
AI BENCHY
Advertise here

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.4 Mini

يتقدم GPT-5.4 Mini في متوسط النتيجة بـ 5.9 مقابل 5.6. لدى KAT-Coder-Air V2.5 (high) تكلفة benchmark أقل عند $0.077 مقابل $0.095. GPT-5.4 Mini أسرع عند 1.53s مقابل 15.90s، مع معدلات نجاح 43.9% مقابل 33.3%.

النموذج الموصى بهGPT-5.4 MiniIt has the best score here (5.9), while responding about 10.4x faster than KAT-Coder-Air V2.5 (high).

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-07-21

المقياس KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high الإصدار: 2026-07-14 GPT-5.4 Mini GPT-5.4 Mini none الإصدار: 2026-03-17
النتيجة 5.6 5.9
الترتيب #150 #142
الموثوقية 9.9 10.0
الاتساق 7.7 8.9
اختبارات صحيحة
معدل النجاح لكل محاولة 43.9% 33.3%
اختبارات غير مستقرة 6 3
إجمالي مرات التشغيل 66 66
التكلفة لكل نتيجة 1.097 1.580
إجمالي التكلفة $0.077 $0.095
سعر الإدخال $0.150 / 1M $0.750 / 1M
سعر الإخراج $0.600 / 1M $4.500 / 1M
إجمالي رموز الإدخال 50,470 79,067
رموز الإخراج 3,957 7,880
رموز الاستدلال 111,374 0
زمن الاستجابة (المتوسط) 15.90s 1.53s
زمن الاستجابة (الحد الأقصى) 118.35s 9.92s
زمن الاستجابة (الإجمالي) 349.71s 33.74s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#150 KAT-Coder-Air V2.5

high
SVG غير صالح
التكلفة
$0.000
الوقت
300.0s
الرموز
0 tok

#142 GPT-5.4 Mini

none
التكلفة
$0.010
الوقت
11.7s
الرموز
2,151 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GPT-5.4 Mini 5.5 10.0 33.3% 0 913ms 7,305 401 0

مقارنة سريعة

تبديل زوج المقارنة