Bespoke Labs
اجرا: 2026-10-16
ٹیسٹ کیا گیا: 2026-10-16 00:55
bespokelabs/bespoke-nimble-9b-v3::none
9Bگنجانوزن دستیاب خلاصہ
Nimble v3 9B AI BENCHY پر 0.8 اسکور کرتا ہے اور #430 پر ہے۔ اس کی reliability 10.0، pass rate 4.4%، کل لاگت ~$0.001، اور اوسط response time 363ms ہے۔
Nimble v3 9B کو منفرد کیا بناتا ہے: اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔ یہ ملتے جلتے models کے مقابلے میں نمایاں طور پر تیز ہے۔
ماڈل کی تفصیلات
تحقیق کی تاریخ: 2026-10-16
- پیرامیٹرز
- 9B
- ساخت
- گنجان
- دستیابی
- وزن دستیاب
- لائسنس
- CC-BY-NC-4.0
0.8
تسلسل
3.0
10.0
~$0.001
کل آؤٹ پٹ ٹوکنز
0
کل ان پٹ ٹوکنز
103,770
بینچ مارک کی تخمینی بجلی لاگت
~$0.001
غلط ٹیسٹس: 6
فی کوشش کامیابی کی شرح: 4.4%
بینچ مارک کوریج: 21/69 کوششیں. اڈاپٹر انتخاب فراہم کرتے ہیں۔ 7/23 ٹیسٹ معاونت یافتہ ہیں۔ باقی ٹیسٹ غیر معاون ہیں، ناکام نہیں۔ اسکور پورے ٹیسٹ مجموعے پر مبنی ہے۔
غیر مستحکم ٹیسٹ
0
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
Nimble v3 9BdefaultvsTev1 4B ExperimentaldefaultNimble v3 9BdefaultvsSolar DecidedefaultNimble v3 9BdefaultvsMicrosoft-Decision-1defaultNimble v3 9BdefaultvsSolar Decide FlashdefaultNimble v3 9BdefaultvsGemini 3 Flash PreviewhighNimble v3 9BdefaultvsD1defaultNimble v3 9BdefaultvsClef OmnidefaultNimble v3 9BdefaultvsClassify-1defaultNimble v3 9BdefaultvsJev 1.14defaultNimble v3 9BdefaultvsKev 4Bdefault
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| خودمختار ایجنٹ کے کام | 0.0 | 0.0 | |
| اینٹی اے آئی چالیں | 2.5 | 2.5 | |
| کوڈنگ | 0.0 | 0.0 | |
| مشترکہ | 0.0 | 0.0 | |
| ڈیٹا پارسنگ اور استخراج | 3.0 | 10.0 | |
| ڈومین مخصوص | 2.0 | 6.7 | |
| عمومی ذہانت | 0.0 | 0.0 | |
| ہدایات کی پیروی | 1.5 | 5.0 | |
| پہیلی حل کرنا | 1.7 | 3.3 | |
| ٹول کالنگ | 0.0 | 0.0 | |
| معلومات عامہ | 0.0 | 0.0 |