Typesafe
रिलीज़: 2026-09-18
परीक्षण किया गया: 2026-10-01 17:52
typesafe/jev-1.13::none
-अन्यबंद स्रोत सारांश
Jev 1.13 AI BENCHY पर 2.6 स्कोर करता है और #441 पर है। इसकी reliability 10.0, pass rate 26.1%, कुल लागत $0.003, और औसत response time 698ms है।
Jev 1.13 को अलग क्या बनाता है: यह डेटा पार्सिंग और निष्कर्षण में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है।
मॉडल विवरण
शोध की तारीख: 2026-09-18
- पैरामीटर
- -
- आर्किटेक्चर
- अन्य
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
2.6
संगति
5.2
10.0
$0.003
कुल आउटपुट टोकन
18,927
कुल इनपुट टोकन
67,092
इनपुट कीमत
$0.042 / 1M
आउटपुट कीमत
$0.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
गलत टेस्ट: 6
प्रति प्रयास पास दर: 26.1%
बेंचमार्क कवरेज: 36/69 प्रयास. विकल्प अडैप्टर देते हैं। 12/23 परीक्षण समर्थित हैं। अन्य परीक्षण असमर्थित हैं, विफल नहीं। स्कोर पूरे परीक्षण समूह पर आधारित है।
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Jev 1.13defaultvsd1-ultradefaultJev 1.13defaultvsDecider V1.2defaultJev 1.13defaultvsSpan-02defaultJev 1.13defaultvsDecider V1.1 27BdefaultJev 1.13defaultvsCommand A+lowJev 1.13defaultvsDrex v1.5defaultJev 1.13defaultvsCommand A+noneJev 1.13defaultvsGPT-6 Luna DecisionsdefaultJev 1.13defaultvsCommand A+highJev 1.13defaultvsKev 4Bdefault
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| स्वायत्त एजेंट कार्य | 0.0 | 0.0 | |
| एंटी-एआई ट्रिक्स | 4.0 | 7.5 | |
| कोडिंग | 2.2 | 6.7 | |
| संयुक्त | 0.0 | 0.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 0.0 | 0.0 | |
| निर्देश पालन | 1.5 | 5.0 | |
| पहेली समाधान | 3.3 | 3.3 | |
| टूल कॉलिंग | 0.0 | 0.0 | |
| सामान्य ज्ञान | 0.0 | 0.0 |