التنقل
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Nemotron 3 Ultra 550b A55b

الملخص

يتقدم Nemotron 3 Ultra 550b A55b (medium) في متوسط النتيجة بـ 8.1 مقابل 7.7. لدى Nemotron 3 Ultra 550b A55b (medium) تكلفة benchmark أقل عند $0.158 مقابل $0.246. KAT-Coder-Pro V2.5 (high) أسرع عند 12.30s مقابل 15.05s، مع معدلات نجاح 63.5% مقابل 69.8%.

النموذج الموصى بهNemotron 3 Ultra 550b A55b (medium)It has the best score here (8.1), while costing about 1.6x less than KAT-Coder-Pro V2.5 (high).

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-07-14

المقياس KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high الإصدار: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium الإصدار: 2026-06-04 متاح مجانًا
النتيجة 7.7 8.1
الترتيب #53 #31
الموثوقية 10.0 9.7
الاتساق 8.1 8.8
اختبارات صحيحة
معدل النجاح لكل محاولة 63.5% 69.8%
اختبارات غير مستقرة 5 3
إجمالي مرات التشغيل 63 63
التكلفة لكل نتيجة 2.228 0.000
إجمالي التكلفة $0.246 $0.158
سعر الإدخال $0.740 / 1M $0.500 / 1M
سعر الإخراج $2.960 / 1M $2.200 / 1M
إجمالي رموز الإدخال 42,750 46,813
رموز الإخراج 2,509 18,002
رموز الاستدلال 69,594 53,091
زمن الاستجابة (المتوسط) 12.30s 15.05s
زمن الاستجابة (الحد الأقصى) 95.65s 43.93s
زمن الاستجابة (الإجمالي) 258.34s 316.09s

عرض إنشاء

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
التكلفة
$0.009
الوقت
26.4s
الرموز
3,117 tok

#31 Nemotron 3 Ultra 550b A55b

medium
SVG غير صالح
التكلفة
$0.000
الوقت
300.0s
الرموز
0 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

مقارنة سريعة

تبديل زوج المقارنة