التنقل
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

الملخص

يتقدم Step 3.7 Flash (medium) في متوسط النتيجة بـ 8.5 مقابل 8.0. لدى KAT-Coder-Pro V2.5 (low) تكلفة benchmark أقل عند $0.220 مقابل $0.376. KAT-Coder-Pro V2.5 (low) أسرع عند 10.44s مقابل 20.35s، مع معدلات نجاح 71.4% مقابل 73.0%.

النموذج الموصى بهKAT-Coder-Pro V2.5 (low)Its score stays close to the best score here (8.0 vs 8.5), while costing about 1.7x less than Step 3.7 Flash (medium).

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-07-14

المقياس KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low الإصدار: 2026-07-14 Step 3.7 Flash Step 3.7 Flash medium الإصدار: 2026-05-29
النتيجة 8.0 8.5
الترتيب #35 #23
الموثوقية 9.9 9.9
الاتساق 7.3 9.3
اختبارات صحيحة
معدل النجاح لكل محاولة 71.4% 73.0%
اختبارات غير مستقرة 7 2
إجمالي مرات التشغيل 63 61
التكلفة لكل نتيجة 1.991 2.686
إجمالي التكلفة $0.220 $0.376
سعر الإدخال $0.740 / 1M $0.200 / 1M
سعر الإخراج $2.960 / 1M $1.150 / 1M
إجمالي رموز الإدخال 42,750 39,981
رموز الإخراج 2,167 319,958
رموز الاستدلال 61,133 0
زمن الاستجابة (المتوسط) 10.44s 20.35s
زمن الاستجابة (الحد الأقصى) 51.34s 113.98s
زمن الاستجابة (الإجمالي) 219.17s 427.42s

عرض إنشاء

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
التكلفة
$0.016
الوقت
47.6s
الرموز
5,182 tok

#23 Step 3.7 Flash

medium
التكلفة
$0.006
الوقت
46.2s
الرموز
4,466 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0

مقارنة سريعة

تبديل زوج المقارنة