AI BENCHY
Advertise here
#81

GLM 5.1

Z.ai प्रकाशन: 2026-04-07 चाचणी तारीख: 2026-04-22 12:55 z-ai/glm-5.1::none
744B एकूण (40B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

GLM 5.1 AI BENCHY वर 5.6 स्कोर करते आणि #81 वर आहे. याची reliability लागू नाही, pass rate 37.0%, एकूण खर्च $0.053, आणि सरासरी response time 4.33s आहे.

GLM 5.1 खास का आहे: समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
744B एकूण (40B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

8.2

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

3,720

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$1.050 / 1M

आउटपुट किंमत

$3.500 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 13

प्रति प्रयत्न पास दर: 37.0%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

4.33s

प्रतिसाद वेळ (कमाल): 32.57s

प्रतिसाद वेळ (एकूण): 78.02s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#81 GLM 5.1

none
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:32 पुन्हा चाचणी 5.7 10.0 $0.238 तुलना करा
2026-07-16 21:16 नवीन चाचणी जोडली 5.5 10.0 $0.164 तुलना करा
2026-06-04 13:04 नवीन चाचणी जोडली 5.7 10.0 $0.058 तुलना करा
2026-05-21 23:41 सूट बदलला 5.6 10.0 $0.057 तुलना करा
2026-05-08 13:04 सूट बदलला 5.7 10.0 $0.053 तुलना करा
2026-05-08 13:04 सूट बदलला 5.7 10.0 $0.053 तुलना करा
2026-04-22 12:55 पहिली नोंदलेली रन 5.6 लागू नाही $0.053 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-22 12:55 · पहिली नोंदलेली रन54/54 प्रयत्न5.68.2लागू नाही5/1843,7200$0.0534.33s
2026-05-08 13:04 · सूट बदलला57/57 प्रयत्न5.78.010.06/1953,7310$0.0534.23s
फरक-0.1+0.2-1-1-110-$0.001+105ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 4.0 6.3
कोडिंग 5.1 9.1
संयुक्त 2.8 2.1
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 5.0 10.0
सूचनांचे पालन 8.3 10.0
कोडी सोडवणे 5.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स