AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#52

GLM 5.1

Z.ai प्रकाशन: 2026-04-07 चाचणी तारीख: 2026-05-21 23:46 z-ai/glm-5.1::medium
744B एकूण (40B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

GLM 5.1 AI BENCHY वर 7.4 स्कोर करते आणि #52 वर आहे. याची reliability 3.3, pass rate 71.7%, एकूण खर्च $0.286, आणि सरासरी response time 32.22s आहे.

GLM 5.1 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
744B एकूण (40B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

8.3

एकूण आउटपुट टोकन्स

83,351

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.980 / 1M

आउटपुट किंमत

$3.080 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 71.7%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

32.22s

प्रतिसाद वेळ (कमाल): 172.60s

प्रतिसाद वेळ (एकूण): 612.25s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 GLM 5.1

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:58 पुन्हा चाचणी 7.0 8.1 $1.053 तुलना करा
2026-07-16 21:29 नवीन चाचणी जोडली 7.1 8.3 $0.535 तुलना करा
2026-06-04 13:06 नवीन चाचणी जोडली 7.3 6.7 $0.292 तुलना करा
2026-05-21 23:46 सूट बदलला 7.4 3.3 $0.286 सध्याची रन
2026-05-08 14:41 सूट बदलला 7.6 0.0 $0.209 तुलना करा
2026-05-08 14:41 सूट बदलला 7.6 0.0 $0.209 तुलना करा
2026-04-22 12:55 पहिली नोंदलेली रन 7.8 लागू नाही $0.201 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-21 23:46 · सूट बदलला60/60 प्रयत्न7.48.33.312/20483,3510$0.28632.22s
2026-07-16 21:29 · नवीन चाचणी जोडली66/66 प्रयत्न7.18.48.313/224152,55282,623$0.53546.77s
फरक+0.3-0.1-5.0-10-69201-82623-$0.249-14546ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 4.7 1.6
संयुक्त 9.5 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 6.4 5.8
कोडी सोडवणे 8.2 7.2
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स