خلاصہ
Decider V1.1 27B AI BENCHY پر 2.6 اسکور کرتا ہے اور #395 پر ہے۔ اس کی reliability 10.0، pass rate 17.4%، کل لاگت $0.002، اور اوسط response time 320ms ہے۔
Decider V1.1 27B کو منفرد کیا بناتا ہے: یہ ملتے جلتے models کے مقابلے میں نمایاں طور پر تیز ہے۔
ماڈل کی تفصیلات
تحقیق کی تاریخ: 2026-10-07
- پیرامیٹرز
- 27B
- ساخت
- گنجان
- دستیابی
- کھلا ماخذ
- لائسنس
- Apache-2.0
2.6
تسلسل
5.2
10.0
$0.002
کل آؤٹ پٹ ٹوکنز
69
کل ان پٹ ٹوکنز
73,557
ان پٹ قیمت
$0.020 / 1M
آؤٹ پٹ قیمت
$0.000 / 1M
کیش پڑھنے کی قیمت
دستیاب نہیں
کیش میں لکھنے کی قیمت
دستیاب نہیں
کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔
غلط ٹیسٹس: 8
فی کوشش کامیابی کی شرح: 17.4%
بینچ مارک کوریج: 36/69 کوششیں. اڈاپٹر انتخاب فراہم کرتے ہیں۔ 12/23 ٹیسٹ معاونت یافتہ ہیں۔ باقی ٹیسٹ غیر معاون ہیں، ناکام نہیں۔ اسکور پورے ٹیسٹ مجموعے پر مبنی ہے۔
غیر مستحکم ٹیسٹ
0
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| خودمختار ایجنٹ کے کام | 0.0 | 0.0 | |
| اینٹی اے آئی چالیں | 4.0 | 7.5 | |
| کوڈنگ | 4.9 | 6.7 | |
| مشترکہ | 0.0 | 0.0 | |
| ڈیٹا پارسنگ اور استخراج | 6.5 | 10.0 | |
| ڈومین مخصوص | 5.3 | 10.0 | |
| عمومی ذہانت | 0.0 | 0.0 | |
| ہدایات کی پیروی | 1.5 | 5.0 | |
| پہیلی حل کرنا | 1.7 | 3.3 | |
| ٹول کالنگ | 0.0 | 0.0 | |
| معلومات عامہ | 0.0 | 0.0 |