#87 KAT-Coder-Pro V2.5
none- لاگت
- $0.010
- وقت
- 29.0s
- ٹوکنز
- 3,439 tok
خلاصہ
KAT-Coder-Pro V2.5 AI BENCHY پر 6.7 اسکور کرتا ہے اور #87 پر ہے۔ اس کی reliability 10.0، pass rate 68.2%، کل لاگت $0.476، اور اوسط response time 25.56s ہے۔
تحقیق کی تاریخ: 2026-08-12
عوامی شواہد کی بنیاد پر بہترین تخمینہ؛ فراہم کنندہ نے تمام اقدار ظاہر نہیں کیں۔
6.7
تسلسل
7.4
10.0
$0.476
کل آؤٹ پٹ ٹوکنز
135,861
کل ان پٹ ٹوکنز
98,499
ان پٹ قیمت
$0.740 / 1M
آؤٹ پٹ قیمت
$2.960 / 1M
غیر مستحکم ٹیسٹ
7
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
رن ہسٹری
| ٹیسٹ کیا گیا | اسکور | اعتماد پذیری | درست ٹیسٹس | کل لاگت | موازنہ کریں |
|---|---|---|---|---|---|
| 2026-08-14 03:23 دوبارہ ٹیسٹ | 6.7 | 10.0 | $0.487 | موازنہ کریں | |
| 2026-07-16 23:43 نیا ٹیسٹ شامل ہوا | 6.7 | 10.0 | $0.476 | موجودہ رن | |
| 2026-07-14 11:05 پہلا رن | 6.8 | 10.0 | $0.220 | موازنہ کریں |
اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔
رن موازنہ
| رن | بینچ مارک کوریج | اسکور | تسلسل | اعتماد پذیری | درست ٹیسٹس | غیر مستحکم ٹیسٹ | کل آؤٹ پٹ ٹوکنز | کل ان پٹ ٹوکنز | کل لاگت | ردِعمل کا وقت (اوسط) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 23:43 · نیا ٹیسٹ شامل ہوا | 66/66 کوششیں | 6.7 | 7.4 | 10.0 | 11/22 | 7 | 135,861 | 98,499 | $0.476 | 25.56s |
| 2026-08-14 03:23 · دوبارہ ٹیسٹ | 66/66 کوششیں | 6.7 | 7.0 | 10.0 | 11/22 | 8 | 139,572 | 98,508 | $0.487 | 26.01s |
| فرق | — | 0.0 | +0.4 | 0.0 | 0 | -1 | -3711 | -9 | -$0.011 | -445ms |
ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔
قیمت کی تاریخ
OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔
| تاریخ | ان پٹ قیمت | آؤٹ پٹ قیمت |
|---|---|---|
| 2026-07-14 11:25 | $0.740 / 1M | $2.960 / 1M |
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| اینٹی اے آئی چالیں | 8.7 | 7.9 | |
| کوڈنگ | 6.1 | 4.7 | |
| مشترکہ | 4.1 | 5.0 | |
| ڈیٹا پارسنگ اور استخراج | 10.0 | 10.0 | |
| ڈومین مخصوص | 3.6 | 7.2 | |
| عمومی ذہانت | 4.8 | 3.2 | |
| ہدایات کی پیروی | 9.8 | 10.0 | |
| پہیلی حل کرنا | 8.2 | 7.2 | |
| ٹول کالنگ | 10.0 | 10.0 | |
| معلومات عامہ | 3.0 | 10.0 |