نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4

خلاصہ

GPT-5.4 (medium) average score میں آگے ہے: 8.5 vs 8.0. KAT-Coder-Pro V2.5 (low) کی benchmark لاگت کم ہے: $0.220 vs $1.210. KAT-Coder-Pro V2.5 (low) تیز ہے: 10.44s vs 22.35s، pass rates 71.4% vs 76.2%.

تجویز کردہ ماڈلKAT-Coder-Pro V2.5 (low)Its score stays close to the best score here (8.0 vs 8.5), while costing about 5.5x less than GPT-5.4 (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low اجرا: 2026-07-14 GPT-5.4 GPT-5.4 medium اجرا: 2026-03-05
اسکور 8.0 8.5
درجہ #35 #20
اعتماد پذیری 9.9 10.0
تسلسل 7.3 8.6
درست ٹیسٹس
فی کوشش کامیابی کی شرح 71.4% 76.2%
غیر مستحکم ٹیسٹ 7 4
کل رنز 63 63
فی نتیجہ لاگت 1.991 8.640
کل لاگت $0.220 $1.210
ان پٹ قیمت $0.740 / 1M $2.500 / 1M
آؤٹ پٹ قیمت $2.960 / 1M $15.000 / 1M
کل ان پٹ ٹوکنز 42,750 34,108
آؤٹ پٹ ٹوکنز 2,167 2,242
ریزننگ ٹوکنز 61,133 72,707
ردِعمل کا وقت (اوسط) 10.44s 22.35s
ردِعمل کا وقت (زیادہ سے زیادہ) 51.34s 100.41s
ردِعمل کا وقت (کل) 219.17s 469.29s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
لاگت
$0.016
وقت
47.6s
ٹوکنز
5,182 tok

#20 GPT-5.4

medium
لاگت
$0.214
وقت
199.6s
ٹوکنز
14,349 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
GPT-5.4 8.8 7.8 88.9% 1 44.36s 7,305 433 24,216

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں