نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs StepFun: Step 3.5 Flash

خلاصہ

Step 3.5 Flash (medium) average score میں آگے ہے: 6.6 vs 6.2. KAT-Coder-Air V2.5 (high) کی benchmark لاگت کم ہے: $0.064 vs $0.070. KAT-Coder-Air V2.5 (high) تیز ہے: 11.02s vs 72.53s، pass rates 46.0% vs 54.0%.

تجویز کردہ ماڈلKAT-Coder-Air V2.5 (high)Its score stays close to the best score here (6.2 vs 6.6), while responding about 6.6x faster than Step 3.5 Flash (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high اجرا: 2026-07-14 Step 3.5 Flash Step 3.5 Flash medium اجرا: 2026-02-01
اسکور 6.2 6.6
درجہ #110 #98
اعتماد پذیری 9.7 10.0
تسلسل 7.6 8.9
درست ٹیسٹس
فی کوشش کامیابی کی شرح 46.0% 54.0%
غیر مستحکم ٹیسٹ 6 1
کل رنز 63 60
فی نتیجہ لاگت 0.910 0.198
کل لاگت $0.064 $0.070
ان پٹ قیمت $0.150 / 1M $0.100 / 1M
آؤٹ پٹ قیمت $0.600 / 1M $0.300 / 1M
کل ان پٹ ٹوکنز 41,748 34,431
آؤٹ پٹ ٹوکنز 3,894 91,587
ریزننگ ٹوکنز 91,773 195,973
ردِعمل کا وقت (اوسط) 11.02s 72.53s
ردِعمل کا وقت (زیادہ سے زیادہ) 104.98s 453.94s
ردِعمل کا وقت (کل) 231.37s 1015.47s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
غلط SVG
لاگت
$0.000
وقت
300.0s
ٹوکنز
0 tok

#98 Step 3.5 Flash

medium
لاگت
$0.008
وقت
277.1s
ٹوکنز
23,695 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں