نیویگیشن
Advertise here

KAT Coder AIR V2.5 (low) vs GPT-4o-mini

average score تقریباً برابر ہے: 5.0 vs 5.0. GPT-4o-mini کی benchmark لاگت کم ہے: $0.024 vs $0.046. GPT-4o-mini تیز ہے: 4.16s vs 10.21s، pass rates 42.0% vs 21.7%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-01

موازنہ کیے گئے ماڈلز

درجہ
#301
کل آؤٹ پٹ ٹوکنز
60,414
ردِعمل کا وقت (اوسط)
10.21s
کل لاگت
$0.046
درجہ
#300
کل آؤٹ پٹ ٹوکنز
3,627
ردِعمل کا وقت (اوسط)
4.16s
کل لاگت
$0.024
تجویز کردہ ماڈل GPT-4o-mini

It has the best score here (5.0), while costing about 1.9x less than KAT Coder AIR V2.5 (low).

تفصیلی موازنہ

میٹرک KAT Coder AIR V2.5 KAT Coder AIR V2.5 low اجرا: 2026-07-14 GPT-4o-mini GPT-4o-mini none اجرا: 2024-07-18
اسکور 5.0 5.0
درجہ #301 #300
اعتماد پذیری 9.9 10.0
تسلسل 7.8 9.9
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 42.0% 21.7%
غیر مستحکم ٹیسٹ 6 0
کل رنز 69 69
فی نتیجہ لاگت 0.649 0.480
کل لاگت $0.046 $0.024
ان پٹ قیمت $0.000 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.000 / 1M $0.600 / 1M
کل ان پٹ ٹوکنز 61,094 145,180
آؤٹ پٹ ٹوکنز 6,532 3,627
ریزننگ ٹوکنز 53,882 0
ردِعمل کا وقت (اوسط) 10.21s 4.16s
ردِعمل کا وقت (زیادہ سے زیادہ) 86.23s 39.99s
ردِعمل کا وقت (کل) 234.86s 70.70s
پیرامیٹرز ~35B کل (~3B فعال) ~8B
دستیابی بند ماخذ بند ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#301 KAT Coder AIR V2.5

low
لاگت
$0.004
وقت
29.9s
ٹوکنز
6,008 tok

#300 GPT-4o-mini

none
لاگت
$0.001
وقت
6.6s
ٹوکنز
742 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT Coder AIR V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں