Advertise here
#478

Joey 1

Baseten प्रकाशन: 2026-10-29 चाचणी तारीख: 2026-11-09 21:38 baseten/joey-1::none
2Bघनमुक्त स्रोतअंदाजित

सारांश

Joey 1 AI BENCHY वर 1.9 स्कोर करते आणि #478 वर आहे. याची reliability 10.0, pass rate 13.0%, एकूण खर्च $0.001, आणि सरासरी response time 646ms आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-11-09

अंदाजित
पॅरामीटर्स
2B
आर्किटेक्चर
घन
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

5.2

एकूण आउटपुट टोकन्स

69

एकूण इनपुट टोकन्स

53,139

इनपुट किंमत

$0.010 / 1M

आउटपुट किंमत

$0.000 / 1M

कॅश वाचण्याची किंमत

लागू नाही

कॅश लिहिण्याची किंमत

लागू नाही

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

बरोबर चाचण्या

चुकीच्या चाचण्या: 9

प्रति प्रयत्न पास दर: 13.0%

बेंचमार्क कव्हरेज: 36/69 प्रयत्न. अडॅप्टर पर्याय देतात. 12/23 चाचण्या समर्थित आहेत. इतर चाचण्या असमर्थित आहेत, अयशस्वी नाहीत. गुण संपूर्ण चाचणी संचावर आधारित आहेत.

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

646ms

प्रतिसाद वेळ (कमाल): 789ms

प्रतिसाद वेळ (एकूण): 7.75s

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
स्वायत्त एजंट कार्ये 0.0 0.0
अँटी-एआय युक्त्या 4.0 7.5
कोडिंग 2.2 6.7
संयुक्त 0.0 0.0
डेटा पार्सिंग आणि निष्कर्षण 6.5 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 0.0 0.0
सूचनांचे पालन 1.5 5.0
कोडी सोडवणे 1.0 3.3
टूल कॉलिंग 0.0 0.0
सामान्य ज्ञान 0.0 0.0

तुलना केलेली मॉडेल्स