#115 KAT-Coder-Air V2.5
medium- لاگت
- $0.003
- وقت
- 23.7s
- ٹوکنز
- 4,924 tok
AI BENCHY Compare
خلاصہ
GPT-5.5 average score میں آگے ہے: 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) کی benchmark لاگت کم ہے: $0.045 vs $0.231. GPT-5.5 تیز ہے: 1.89s vs 8.28s، pass rates 47.6% vs 54.0%.
بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14
| میٹرک | KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium | GPT-5.5 GPT-5.5 none |
|---|---|---|
| اسکور | 6.2 | 6.3 |
| درجہ | #115 | #109 |
| اعتماد پذیری | 9.7 | 10.0 |
| تسلسل | 8.8 | 8.8 |
| درست ٹیسٹس | ||
| فی کوشش کامیابی کی شرح | 47.6% | 54.0% |
| غیر مستحکم ٹیسٹ | 3 | 3 |
| کل رنز | 63 | 63 |
| فی نتیجہ لاگت | 0.562 | 2.302 |
| کل لاگت | $0.045 | $0.231 |
| ان پٹ قیمت | $0.150 / 1M | $5.000 / 1M |
| آؤٹ پٹ قیمت | $0.600 / 1M | $30.000 / 1M |
| کل ان پٹ ٹوکنز | 42,750 | 34,212 |
| آؤٹ پٹ ٹوکنز | 7,759 | 1,971 |
| ریزننگ ٹوکنز | 56,357 | 0 |
| ردِعمل کا وقت (اوسط) | 8.28s | 1.89s |
| ردِعمل کا وقت (زیادہ سے زیادہ) | 48.19s | 5.56s |
| ردِعمل کا وقت (کل) | 173.80s | 39.64s |
جنریشن شوکیس
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
| کوڈنگ | اسکور | تسلسل | فی کوشش کامیابی کی شرح | غیر مستحکم ٹیسٹ | درست ٹیسٹس | ردِعمل کا وقت (اوسط) | ان پٹ ٹوکنز | آؤٹ پٹ ٹوکنز | ریزننگ ٹوکنز |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Air V2.5 | 3.6 | 7.0 | 22.2% | 1 | 23.37s | 7,893 | 5,199 | 29,973 | |
| GPT-5.5 | 5.5 | 10.0 | 33.3% | 0 | 1.35s | 7,305 | 462 | 0 |
موازنہ کی جوڑی تبدیل کریں