Advertise here
#526

Bison 1

Baseten प्रकाशन: 2026-11-20 चाचणी तारीख: 2026-11-22 00:14 baseten/bison-1::none
31Bघनमुक्त स्रोत

सारांश

Bison 1 AI BENCHY वर 2.2 स्कोर करते आणि #526 वर आहे. याची reliability 7.5, pass rate 23.2%, एकूण खर्च $0.004, आणि सरासरी response time 680ms आहे.

Bison 1 खास का आहे: हे कोडी सोडवणे मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #14.

मॉडेलची माहिती

संशोधन दिनांक: 2026-11-22

जाहीर केलेले
पॅरामीटर्स
31B
आर्किटेक्चर
घन
उपलब्धता
मुक्त स्रोत
परवाना
MIT AND Apache-2.0

सुसंगतता

4.1

एकूण आउटपुट टोकन्स

36

एकूण इनपुट टोकन्स

37,001

इनपुट किंमत

$0.100 / 1M

आउटपुट किंमत

$0.000 / 1M

कॅश वाचण्याची किंमत

लागू नाही

कॅश लिहिण्याची किंमत

लागू नाही

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 23.2%

बेंचमार्क कव्हरेज: 36/69 प्रयत्न. अडॅप्टर पर्याय देतात. 12/23 चाचण्या समर्थित आहेत. इतर चाचण्या असमर्थित आहेत, अयशस्वी नाहीत. गुण संपूर्ण चाचणी संचावर आधारित आहेत.

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

680ms

प्रतिसाद वेळ (कमाल): 1.40s

प्रतिसाद वेळ (एकूण): 8.16s

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
स्वायत्त एजंट कार्ये 0.0 0.0
अँटी-एआय युक्त्या 3.9 5.4
कोडिंग 2.9 3.7
संयुक्त 0.0 0.0
डेटा पार्सिंग आणि निष्कर्षण 6.4 5.9
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 0.0 0.0
सूचनांचे पालन 1.5 5.0
कोडी सोडवणे 3.3 3.3
टूल कॉलिंग 0.0 0.0
सामान्य ज्ञान 0.0 0.0

तुलना केलेली मॉडेल्स