Perplexity
प्रकाशन: 2026-10-17
चाचणी तारीख: 2026-10-17 10:59
perplexity/pplx-decider-v1.2::none
27Bघनमुक्त स्रोत सारांश
Decider V1.2 AI BENCHY वर 2.6 स्कोर करते आणि #424 वर आहे. याची reliability 9.4, pass rate 24.6%, एकूण खर्च $0.001, आणि सरासरी response time 517ms आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-10-17
- पॅरामीटर्स
- 27B
- आर्किटेक्चर
- घन
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
2.6
सुसंगतता
4.9
9.4
$0.001
एकूण आउटपुट टोकन्स
67
एकूण इनपुट टोकन्स
48,363
इनपुट किंमत
$0.020 / 1M
आउटपुट किंमत
$0.000 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
चुकीच्या चाचण्या: 7
प्रति प्रयत्न पास दर: 24.6%
बेंचमार्क कव्हरेज: 36/69 प्रयत्न. अडॅप्टर पर्याय देतात. 12/23 चाचण्या समर्थित आहेत. इतर चाचण्या असमर्थित आहेत, अयशस्वी नाहीत. गुण संपूर्ण चाचणी संचावर आधारित आहेत.
अस्थिर चाचण्या
1
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Decider V1.2defaultvsJev 1.13defaultDecider V1.2defaultvsDecider V1.1 27BdefaultDecider V1.2defaultvsd1-ultradefaultDecider V1.2defaultvsDrex v1.5defaultDecider V1.2defaultvsSpan-02defaultDecider V1.2defaultvsGPT-6 Luna DecisionsdefaultDecider V1.2defaultvsCommand A+lowDecider V1.2defaultvsKev 4BdefaultDecider V1.2defaultvsCommand A+noneDecider V1.2defaultvsJev 1.14default
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 0.0 | 0.0 | |
| अँटी-एआय युक्त्या | 5.8 | 7.5 | |
| कोडिंग | 4.5 | 6.7 | |
| संयुक्त | 0.0 | 0.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 5.9 | 7.2 | |
| Samanya Buddhimatta | 0.0 | 0.0 | |
| सूचनांचे पालन | 1.5 | 5.0 | |
| कोडी सोडवणे | 1.7 | 3.3 | |
| टूल कॉलिंग | 0.0 | 0.0 | |
| सामान्य ज्ञान | 0.0 | 0.0 |