نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

خلاصہ

average score تقریباً برابر ہے: 7.5 vs 7.5. GPT-5.4 Nano (medium) کی benchmark لاگت کم ہے: $0.107 vs $0.275. GPT-5.4 Nano (medium) تیز ہے: 11.95s vs 12.95s، pass rates 65.1% vs 63.5%.

تجویز کردہ ماڈلGPT-5.4 Nano (medium)It has the best score here (7.5), while costing about 2.6x less than KAT-Coder-Pro V2.5 (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium اجرا: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium اجرا: 2026-03-17
اسکور 7.5 7.5
درجہ #60 #62
اعتماد پذیری 10.0 10.0
تسلسل 7.7 8.4
درست ٹیسٹس
فی کوشش کامیابی کی شرح 65.1% 63.5%
غیر مستحکم ٹیسٹ 6 4
کل رنز 63 63
فی نتیجہ لاگت 2.498 0.969
کل لاگت $0.275 $0.107
ان پٹ قیمت $0.740 / 1M $0.200 / 1M
آؤٹ پٹ قیمت $2.960 / 1M $1.250 / 1M
کل ان پٹ ٹوکنز 42,750 35,434
آؤٹ پٹ ٹوکنز 2,098 3,014
ریزننگ ٹوکنز 80,027 76,520
ردِعمل کا وقت (اوسط) 12.95s 11.95s
ردِعمل کا وقت (زیادہ سے زیادہ) 81.45s 94.06s
ردِعمل کا وقت (کل) 271.92s 250.98s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
لاگت
$0.009
وقت
25.6s
ٹوکنز
2,939 tok

#62 GPT-5.4 Nano

medium
لاگت
$0.007
وقت
24.6s
ٹوکنز
4,943 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں