सारांश
Jev 1.13 AI BENCHY वर 3.2 स्कोर करते आणि #328 वर आहे. याची reliability 10.0, pass rate 27.3%, एकूण खर्च $0.003, आणि सरासरी response time 698ms आहे.
Jev 1.13 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #5 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #25. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-09-18
- पॅरामीटर्स
- -
- आर्किटेक्चर
- इतर
- उपलब्धता
- बंद स्रोत
- परवाना
- -
3.2
सुसंगतता
5.5
10.0
$0.003
एकूण आउटपुट टोकन्स
18,927
एकूण इनपुट टोकन्स
67,092
इनपुट किंमत
$0.042 / 1M
आउटपुट किंमत
$0.000 / 1M
चुकीच्या चाचण्या: 6
प्रति प्रयत्न पास दर: 27.3%
बेंचमार्क कव्हरेज: 36/66 प्रयत्न. अडॅप्टर पर्याय देतात. 12/22 चाचण्या समर्थित आहेत. इतर चाचण्या असमर्थित आहेत, अयशस्वी नाहीत. गुण संपूर्ण चाचणी संचावर आधारित आहेत.
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.0 | 7.5 | |
| कोडिंग | 2.2 | 6.7 | |
| संयुक्त | 0.0 | 0.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 0.0 | 0.0 | |
| सूचनांचे पालन | 1.5 | 5.0 | |
| कोडी सोडवणे | 3.3 | 3.3 | |
| टूल कॉलिंग | 0.0 | 0.0 | |
| सामान्य ज्ञान | 0.0 | 0.0 |