التنقل
AI BENCHY
Advertise here

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

يتقدم Step 3.7 Flash (high) في متوسط النتيجة بـ 6.9 مقابل 6.7. لدى KAT-Coder-Pro V2.5 تكلفة benchmark أقل عند $0.476 مقابل $1.207. KAT-Coder-Pro V2.5 أسرع عند 25.56s مقابل 64.68s، مع معدلات نجاح 68.2% مقابل 63.6%.

النموذج الموصى بهKAT-Coder-Pro V2.5Its score stays close to the best score here (6.7 vs 6.9), while costing about 2.5x less than Step 3.7 Flash (high).

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-07-17

المقياس KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none الإصدار: 2026-07-14 Step 3.7 Flash Step 3.7 Flash high الإصدار: 2026-05-29
النتيجة 6.7 6.9
الترتيب #88 #83
الموثوقية 10.0 10.0
الاتساق 7.4 8.0
اختبارات صحيحة
معدل النجاح لكل محاولة 68.2% 63.6%
اختبارات غير مستقرة 7 5
إجمالي مرات التشغيل 66 66
التكلفة لكل نتيجة 4.319 10.973
إجمالي التكلفة $0.476 $1.207
سعر الإدخال $0.740 / 1M $0.200 / 1M
سعر الإخراج $2.960 / 1M $1.150 / 1M
إجمالي رموز الإدخال 98,499 98,691
رموز الإخراج 135,861 1,032,395
رموز الاستدلال 0 0
زمن الاستجابة (المتوسط) 25.56s 64.68s
زمن الاستجابة (الحد الأقصى) 335.41s 364.99s
زمن الاستجابة (الإجمالي) 562.43s 1423.01s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#88 KAT-Coder-Pro V2.5

none
التكلفة
$0.010
الوقت
29.0s
الرموز
3,439 tok

#83 Step 3.7 Flash

high
التكلفة
$0.007
الوقت
63.6s
الرموز
6,030 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

مقارنة سريعة

تبديل زوج المقارنة