Advertise here
#266

Beam 1.0 501B A23B

Reflection रिलीज़: 2026-10-17 परीक्षण किया गया: 2026-10-17 10:59 reflection/beam-1.0-501b-a23b::high
501B कुल (23B सक्रिय)MoEमुक्त स्रोत

सारांश

Beam 1.0 501B A23B AI BENCHY पर 6.1 स्कोर करता है और #266 पर है। इसकी reliability 10.0, pass rate 59.4%, कुल लागत $0.674, और औसत response time 9.03s है।

Beam 1.0 501B A23B को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि टूल कॉलिंग इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है।

मॉडल विवरण

शोध की तारीख: 2026-10-17

घोषित
पैरामीटर
501B कुल (23B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

8.3

कुल आउटपुट टोकन

147,207

कुल इनपुट टोकन

232,218

इनपुट कीमत

$1.000 / 1M

आउटपुट कीमत

$3.000 / 1M

कैश पढ़ने की कीमत

$0.100 / 1M

कैश लिखने की कीमत

लागू नहीं

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

सही परीक्षण

गलत टेस्ट: 12

प्रति प्रयास पास दर: 59.4%

अस्थिर टेस्ट

5

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

9.03s

प्रतिक्रिया समय (अधिकतम): 36.04s

प्रतिक्रिया समय (कुल): 207.67s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#266 Beam 1.0 501B A23B

high
लागत
$0.008
समय
15.6s
टोकन
6,162 tok

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
स्वायत्त एजेंट कार्य 3.0 10.0
एंटी-एआई ट्रिक्स 8.8 8.3
कोडिंग 8.4 7.4
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 5.1 3.4
निर्देश पालन 9.8 10.0
पहेली समाधान 8.2 7.2
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल