التنقل
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

الملخص

يتقدم Step 3.7 Flash (low) في متوسط النتيجة بـ 7.7 مقابل 7.5. لدى KAT-Coder-Pro V2.5 (medium) تكلفة benchmark أقل عند $0.275 مقابل $0.341. KAT-Coder-Pro V2.5 (medium) أسرع عند 12.95s مقابل 15.74s، مع معدلات نجاح 65.1% مقابل 68.3%.

النموذج الموصى بهKAT-Coder-Pro V2.5 (medium)It offers the best overall trade-off: a competitive score (7.5), lower cost than Step 3.7 Flash (low), and balanced response time.

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-07-14

المقياس KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium الإصدار: 2026-07-14 Step 3.7 Flash Step 3.7 Flash low الإصدار: 2026-05-29
النتيجة 7.5 7.7
الترتيب #60 #51
الموثوقية 10.0 10.0
الاتساق 7.7 8.4
اختبارات صحيحة
معدل النجاح لكل محاولة 65.1% 68.3%
اختبارات غير مستقرة 6 4
إجمالي مرات التشغيل 63 63
التكلفة لكل نتيجة 2.498 2.840
إجمالي التكلفة $0.275 $0.341
سعر الإدخال $0.740 / 1M $0.200 / 1M
سعر الإخراج $2.960 / 1M $1.150 / 1M
إجمالي رموز الإدخال 42,750 40,101
رموز الإخراج 2,098 289,325
رموز الاستدلال 80,027 0
زمن الاستجابة (المتوسط) 12.95s 15.74s
زمن الاستجابة (الحد الأقصى) 81.45s 124.75s
زمن الاستجابة (الإجمالي) 271.92s 330.63s

عرض إنشاء

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
التكلفة
$0.009
الوقت
25.6s
الرموز
2,939 tok

#51 Step 3.7 Flash

low
SVG غير صالح
التكلفة
$0.004
الوقت
25.3s
الرموز
3,072 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

مقارنة سريعة

تبديل زوج المقارنة