Baseten
रिलीज़: 2026-10-29
परीक्षण किया गया: 2026-11-09 21:38
baseten/joey-1::none
2Bसघनमुक्त स्रोतअनुमानित सारांश
Joey 1 AI BENCHY पर 1.9 स्कोर करता है और #478 पर है। इसकी reliability 10.0, pass rate 13.0%, कुल लागत $0.001, और औसत response time 646ms है।
मॉडल विवरण
शोध की तारीख: 2026-11-09
- पैरामीटर
- 2B
- आर्किटेक्चर
- सघन
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- MIT
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
1.9
संगति
5.2
10.0
$0.001
कुल आउटपुट टोकन
69
कुल इनपुट टोकन
53,139
इनपुट कीमत
$0.010 / 1M
आउटपुट कीमत
$0.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
गलत टेस्ट: 9
प्रति प्रयास पास दर: 13.0%
बेंचमार्क कवरेज: 36/69 प्रयास. विकल्प अडैप्टर देते हैं। 12/23 परीक्षण समर्थित हैं। अन्य परीक्षण असमर्थित हैं, विफल नहीं। स्कोर पूरे परीक्षण समूह पर आधारित है।
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Joey 1defaultvsDecider Flash V1.2defaultJoey 1defaultvsD1defaultJoey 1defaultvsClef OmnidefaultJoey 1defaultvsGemini 3 Flash PreviewhighJoey 1defaultvsDecisions Fastdefaultनिःशुल्क उपलब्धJoey 1defaultvsSolar Decide FlashdefaultJoey 1defaultvsClassify-1defaultJoey 1defaultvsMicrosoft-Decision-1defaultJoey 1defaultvsMammoth 1defaultनिःशुल्क उपलब्धJoey 1defaultvsd1.1default
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| स्वायत्त एजेंट कार्य | 0.0 | 0.0 | |
| एंटी-एआई ट्रिक्स | 4.0 | 7.5 | |
| कोडिंग | 2.2 | 6.7 | |
| संयुक्त | 0.0 | 0.0 | |
| डेटा पार्सिंग और निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 0.0 | 0.0 | |
| निर्देश पालन | 1.5 | 5.0 | |
| पहेली समाधान | 1.0 | 3.3 | |
| टूल कॉलिंग | 0.0 | 0.0 | |
| सामान्य ज्ञान | 0.0 | 0.0 |