نیویگیشن
Advertise here

KAT Coder AIR V2.5 (high) vs Mistral Small 4

average score تقریباً برابر ہے: 5.2 vs 5.1. Mistral Small 4 کی benchmark لاگت کم ہے: $0.047 vs $0.077. Mistral Small 4 تیز ہے: 3.12s vs 15.23s، pass rates 40.6% vs 24.6%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-01

موازنہ کیے گئے ماڈلز

درجہ
#288
کل آؤٹ پٹ ٹوکنز
114,654
ردِعمل کا وقت (اوسط)
15.23s
کل لاگت
$0.077
درجہ
#292
کل آؤٹ پٹ ٹوکنز
10,913
ردِعمل کا وقت (اوسط)
3.12s
کل لاگت
$0.047
تجویز کردہ ماڈل Mistral Small 4

It has the best score here (5.1), while costing about 1.6x less than KAT Coder AIR V2.5 (high).

تفصیلی موازنہ

میٹرک KAT Coder AIR V2.5 KAT Coder AIR V2.5 high اجرا: 2026-07-14 Mistral Small 4 Mistral Small 4 none اجرا: 2026-03-16
اسکور 5.2 5.1
درجہ #288 #292
اعتماد پذیری 9.8 10.0
تسلسل 8.2 9.6
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 40.6% 24.6%
غیر مستحکم ٹیسٹ 5 1
کل رنز 69 69
فی نتیجہ لاگت 1.091 0.928
کل لاگت $0.077 $0.047
ان پٹ قیمت $0.000 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.000 / 1M $0.600 / 1M
کل ان پٹ ٹوکنز 50,423 265,602
آؤٹ پٹ ٹوکنز 4,144 10,913
ریزننگ ٹوکنز 110,510 0
ردِعمل کا وقت (اوسط) 15.23s 3.12s
ردِعمل کا وقت (زیادہ سے زیادہ) 118.35s 45.46s
ردِعمل کا وقت (کل) 350.26s 71.87s
پیرامیٹرز ~35B کل (~3B فعال) 119B کل (6B فعال)
دستیابی بند ماخذ کھلا ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 KAT Coder AIR V2.5

high
Reached the allocated time limit (300 seconds) without receiving showcase output.
لاگت
$0.000
وقت
300.0s
ٹوکنز
0 tok

#292 Mistral Small 4

none
لاگت
$0.002
وقت
10.4s
ٹوکنز
2,370 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT Coder AIR V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں