#115 KAT-Coder-Air V2.5
medium- لاگت
- $0.003
- وقت
- 23.7s
- ٹوکنز
- 4,924 tok
AI BENCHY Compare
خلاصہ
GPT-5.6 Sol average score میں آگے ہے: 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) کی benchmark لاگت کم ہے: $0.045 vs $0.225. GPT-5.6 Sol تیز ہے: 1.66s vs 8.28s، pass rates 47.6% vs 57.1%.
بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14
| میٹرک | KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium | GPT-5.6 Sol GPT-5.6 Sol none |
|---|---|---|
| اسکور | 6.2 | 6.3 |
| درجہ | #115 | #106 |
| اعتماد پذیری | 9.7 | 10.0 |
| تسلسل | 8.8 | 9.0 |
| درست ٹیسٹس | ||
| فی کوشش کامیابی کی شرح | 47.6% | 57.1% |
| غیر مستحکم ٹیسٹ | 3 | 3 |
| کل رنز | 63 | 63 |
| فی نتیجہ لاگت | 0.562 | 2.244 |
| کل لاگت | $0.045 | $0.225 |
| ان پٹ قیمت | $0.150 / 1M | $5.000 / 1M |
| آؤٹ پٹ قیمت | $0.600 / 1M | $30.000 / 1M |
| کل ان پٹ ٹوکنز | 42,750 | 34,218 |
| آؤٹ پٹ ٹوکنز | 7,759 | 1,776 |
| ریزننگ ٹوکنز | 56,357 | 0 |
| ردِعمل کا وقت (اوسط) | 8.28s | 1.66s |
| ردِعمل کا وقت (زیادہ سے زیادہ) | 48.19s | 3.93s |
| ردِعمل کا وقت (کل) | 173.80s | 34.81s |
جنریشن شوکیس
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
| کوڈنگ | اسکور | تسلسل | فی کوشش کامیابی کی شرح | غیر مستحکم ٹیسٹ | درست ٹیسٹس | ردِعمل کا وقت (اوسط) | ان پٹ ٹوکنز | آؤٹ پٹ ٹوکنز | ریزننگ ٹوکنز |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Air V2.5 | 3.6 | 7.0 | 22.2% | 1 | 23.37s | 7,893 | 5,199 | 29,973 | |
| GPT-5.6 Sol | 5.5 | 10.0 | 33.3% | 0 | 1.39s | 7,302 | 390 | 0 |
موازنہ کی جوڑی تبدیل کریں