Perplexity
اجرا: 2026-10-17
ٹیسٹ کیا گیا: 2026-10-17 10:59
perplexity/pplx-decider-v1.2::none
27Bگنجانکھلا ماخذ خلاصہ
Decider V1.2 AI BENCHY پر 2.6 اسکور کرتا ہے اور #424 پر ہے۔ اس کی reliability 9.4، pass rate 24.6%، کل لاگت $0.001، اور اوسط response time 517ms ہے۔
ماڈل کی تفصیلات
تحقیق کی تاریخ: 2026-10-17
- پیرامیٹرز
- 27B
- ساخت
- گنجان
- دستیابی
- کھلا ماخذ
- لائسنس
- Apache-2.0
2.6
تسلسل
4.9
9.4
$0.001
کل آؤٹ پٹ ٹوکنز
67
کل ان پٹ ٹوکنز
48,363
ان پٹ قیمت
$0.020 / 1M
آؤٹ پٹ قیمت
$0.000 / 1M
کیش پڑھنے کی قیمت
دستیاب نہیں
کیش میں لکھنے کی قیمت
دستیاب نہیں
کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔
غلط ٹیسٹس: 7
فی کوشش کامیابی کی شرح: 24.6%
بینچ مارک کوریج: 36/69 کوششیں. اڈاپٹر انتخاب فراہم کرتے ہیں۔ 12/23 ٹیسٹ معاونت یافتہ ہیں۔ باقی ٹیسٹ غیر معاون ہیں، ناکام نہیں۔ اسکور پورے ٹیسٹ مجموعے پر مبنی ہے۔
غیر مستحکم ٹیسٹ
1
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
Decider V1.2defaultvsJev 1.13defaultDecider V1.2defaultvsDecider V1.1 27BdefaultDecider V1.2defaultvsd1-ultradefaultDecider V1.2defaultvsDrex v1.5defaultDecider V1.2defaultvsSpan-02defaultDecider V1.2defaultvsGPT-6 Luna DecisionsdefaultDecider V1.2defaultvsCommand A+lowDecider V1.2defaultvsKev 4BdefaultDecider V1.2defaultvsCommand A+noneDecider V1.2defaultvsJev 1.14default
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| خودمختار ایجنٹ کے کام | 0.0 | 0.0 | |
| اینٹی اے آئی چالیں | 5.8 | 7.5 | |
| کوڈنگ | 4.5 | 6.7 | |
| مشترکہ | 0.0 | 0.0 | |
| ڈیٹا پارسنگ اور استخراج | 6.5 | 10.0 | |
| ڈومین مخصوص | 5.9 | 7.2 | |
| عمومی ذہانت | 0.0 | 0.0 | |
| ہدایات کی پیروی | 1.5 | 5.0 | |
| پہیلی حل کرنا | 1.7 | 3.3 | |
| ٹول کالنگ | 0.0 | 0.0 | |
| معلومات عامہ | 0.0 | 0.0 |