#168 KAT-Coder-Air V2.5
default- لاگت
- $0.002
- وقت
- 14.5s
- ٹوکنز
- 2,619 tok
خلاصہ
KAT Coder AIR V2.5 AI BENCHY پر 4.9 اسکور کرتا ہے اور #168 پر ہے۔ اس کی reliability 10.0، pass rate 38.1%، کل لاگت $0.037، اور اوسط response time 6.99s ہے۔
KAT Coder AIR V2.5 کو منفرد کیا بناتا ہے: اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔
تحقیق کی تاریخ: 2026-08-12
عوامی شواہد کی بنیاد پر بہترین تخمینہ؛ فراہم کنندہ نے تمام اقدار ظاہر نہیں کیں۔
4.9
تسلسل
7.1
10.0
$0.037
کل آؤٹ پٹ ٹوکنز
49,933
کل ان پٹ ٹوکنز
41,328
ان پٹ قیمت
$0.150 / 1M
آؤٹ پٹ قیمت
$0.600 / 1M
کیش پڑھنے کی قیمت
دستیاب نہیں
کیش میں لکھنے کی قیمت
دستیاب نہیں
کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔
غیر مستحکم ٹیسٹ
7
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
رن ہسٹری
| ٹیسٹ کیا گیا | اسکور | اعتماد پذیری | درست ٹیسٹس | کل لاگت | موازنہ کریں |
|---|---|---|---|---|---|
| 2026-08-14 03:15 دوبارہ ٹیسٹ | 4.8 | 10.0 | $0.070 | موازنہ کریں | |
| 2026-07-16 23:28 نیا ٹیسٹ شامل ہوا | 4.8 | 10.0 | $0.067 | موازنہ کریں | |
| 2026-07-14 11:05 پہلا رن | 4.9 | 10.0 | $0.037 | موجودہ رن |
رن موازنہ
| رن | بینچ مارک کوریج | اسکور | تسلسل | اعتماد پذیری | درست ٹیسٹس | غیر مستحکم ٹیسٹ | کل آؤٹ پٹ ٹوکنز | کل ان پٹ ٹوکنز | کل لاگت | ردِعمل کا وقت (اوسط) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-14 11:05 · پہلا رن | 63/63 کوششیں | 4.9 | 7.1 | 10.0 | 5/21 | 7 | 49,933 | 41,328 | $0.037 | 6.99s |
| 2026-07-16 23:28 · نیا ٹیسٹ شامل ہوا | 66/66 کوششیں | 4.8 | 6.9 | 10.0 | 5/22 | 8 | 93,913 | 69,367 | $0.067 | 12.17s |
| فرق | — | +0.2 | +0.2 | 0.0 | 0 | -1 | -43980 | -28039 | -$0.031 | -5185ms |
بینچ مارک کوریج مختلف ہے: 63/63 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 66/66 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔
ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔
قیمت کی تاریخ
OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔
| تاریخ | ان پٹ قیمت | آؤٹ پٹ قیمت | کیش پڑھنے کی قیمت | کیش میں لکھنے کی قیمت |
|---|---|---|---|---|
| 2026-07-14 11:25 | $0.150 / 1M | $0.600 / 1M | دستیاب نہیں | دستیاب نہیں |
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| اینٹی اے آئی چالیں | 5.3 | 5.6 | |
| کوڈنگ | 3.3 | 9.6 | |
| مشترکہ | 4.7 | 1.6 | |
| ڈیٹا پارسنگ اور استخراج | 6.3 | 5.8 | |
| ڈومین مخصوص | 2.9 | 7.2 | |
| عمومی ذہانت | 5.0 | 10.0 | |
| ہدایات کی پیروی | 9.9 | 10.0 | |
| پہیلی حل کرنا | 2.9 | 4.4 | |
| ٹول کالنگ | 10.0 | 10.0 | |
| معلومات عامہ | 3.0 | 10.0 |