#37 GLM 5.1
medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
- लागत
- $0.000
- समय
- 300.0s
- टोकन
- 0 tok
Z.ai
रिलीज़: 2026-04-07
परीक्षण किया गया: 2026-04-22 12:55
z-ai/glm-5.1::medium
744B कुल (40B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
GLM 5.1 AI BENCHY पर 7.8 स्कोर करता है और #37 पर है। इसकी reliability लागू नहीं, pass rate 75.9%, कुल लागत $0.201, और औसत response time 24.13s है।
GLM 5.1 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 744B कुल (40B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- MIT
7.8
संगति
8.6
लागू नहीं
$0.201
कुल आउटपुट टोकन
57,095
कुल इनपुट टोकन
0
इनपुट कीमत
$1.050 / 1M
आउटपुट कीमत
$3.500 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
3
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:58 दोबारा परीक्षण | 7.0 | 8.1 | $1.053 ↑ | तुलना करें | |
| 2026-07-16 21:29 नया टेस्ट जोड़ा गया | 7.1 | 8.3 | $0.535 ↓ | तुलना करें | |
| 2026-06-04 13:06 नया टेस्ट जोड़ा गया | 7.3 | 6.7 | $0.292 ↓ | तुलना करें | |
| 2026-05-21 23:46 सूट बदला गया | 7.4 | 3.3 | $0.286 | तुलना करें | |
| 2026-05-08 14:41 सूट बदला गया | 7.6 | 0.0 | $0.209 | तुलना करें | |
| 2026-05-08 14:41 सूट बदला गया | 7.6 | 0.0 | $0.209 | तुलना करें | |
| 2026-04-22 12:55 पहला दर्ज रन | 7.8 | लागू नहीं | $0.201 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-22 12:55 · पहला दर्ज रन | 54/54 प्रयास | 7.8 | 8.6 | लागू नहीं | 12/18 | 3 | 57,095 | 0 | $0.201 | 24.13s |
| 2026-08-14 01:58 · दोबारा परीक्षण | 66/66 प्रयास | 7.0 | 8.4 | 8.1 | 12/22 | 4 | 215,889 | 82,592 | $1.053 | 58.80s |
| अंतर | — | +0.8 | +0.2 | 0 | -1 | -158794 | -82592 | -$0.853 | -34664ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
GLM 5.1mediumvsSpace Bunny AlphahighGLM 5.1mediumvsSeed-2.0-MinimediumGLM 5.1mediumvsQwen3.8 27Blowनिःशुल्क उपलब्धGLM 5.1mediumvsSeed-2.0-CodehighGLM 5.1mediumvsGPT-6 LunalowGLM 5.1mediumvsGPT-5.6 LunamediumGLM 5.1mediumvsQwen3.8 Flash NextmediumGLM 5.1mediumvsQwen3.6 FlashmediumGLM 5.1mediumvsMuse Glimmer 30BmediumGLM 5.1mediumvsDeepSeek V4 Flash 0731low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 10.0 | 10.0 | |
| कोडिंग | 4.7 | 1.6 | |
| संयुक्त | 9.5 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| निर्देश पालन | 6.4 | 5.8 | |
| पहेली समाधान | 8.2 | 7.2 | |
| टूल कॉलिंग | 3.0 | 10.0 |