نیویگیشن
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: gpt-oss-120b

خلاصہ

KAT-Coder-Pro V2.5 average score میں آگے ہے: 6.8 vs 6.7. gpt-oss-120b (medium) کی benchmark لاگت کم ہے: $0.011 vs $0.220. KAT-Coder-Pro V2.5 تیز ہے: 10.81s vs 22.28s، pass rates 71.4% vs 52.4%.

تجویز کردہ ماڈلgpt-oss-120b (medium)Its score stays close to the best score here (6.7 vs 6.8), while costing about 21.9x less than KAT-Coder-Pro V2.5.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none اجرا: 2026-07-14 gpt-oss-120b gpt-oss-120b medium اجرا: 2025-08-05 مفت دستیاب
اسکور 6.8 6.7
درجہ #89 #96
اعتماد پذیری 10.0 10.0
تسلسل 7.3 8.0
درست ٹیسٹس
فی کوشش کامیابی کی شرح 71.4% 52.4%
غیر مستحکم ٹیسٹ 7 5
کل رنز 63 63
فی نتیجہ لاگت 1.992 0.141
کل لاگت $0.220 $0.011
ان پٹ قیمت $0.740 / 1M $0.030 / 1M
آؤٹ پٹ قیمت $2.960 / 1M $0.150 / 1M
کل ان پٹ ٹوکنز 42,749 39,084
آؤٹ پٹ ٹوکنز 63,338 20,013
ریزننگ ٹوکنز 0 50,233
ردِعمل کا وقت (اوسط) 10.81s 22.28s
ردِعمل کا وقت (زیادہ سے زیادہ) 53.57s 68.16s
ردِعمل کا وقت (کل) 227.02s 311.96s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
لاگت
$0.010
وقت
29.0s
ٹوکنز
3,439 tok

#96 gpt-oss-120b

medium
لاگت
$0.001
وقت
26.7s
ٹوکنز
555 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
gpt-oss-120b 5.9 7.0 55.6% 1 38.37s 7,782 3,365 11,973

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں