#37 GLM 5.1
medium
अमान्य SVG
- लागत
- $0.000
- समय
- 300.0s
- टोकन
- 0 tok
Z.ai
रिलीज़: 2026-04-07
परीक्षण किया गया: 2026-04-22 12:55
z-ai/glm-5.1::medium
744B कुल (40B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
GLM 5.1 AI BENCHY पर 7.8 स्कोर करता है और #37 पर है। इसकी reliability लागू नहीं, pass rate 75.9%, कुल लागत $0.201, और औसत response time 24.13s है।
GLM 5.1 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 744B कुल (40B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- MIT
7.8
संगति
8.6
लागू नहीं
$0.201
कुल आउटपुट टोकन
57,095
कुल इनपुट टोकन
0
इनपुट कीमत
$1.050 / 1M
आउटपुट कीमत
$3.500 / 1M
अस्थिर टेस्ट
3
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:58 दोबारा परीक्षण | 7.0 | 8.1 | $1.053 ↑ | तुलना करें | |
| 2026-07-16 21:29 नया टेस्ट जोड़ा गया | 7.1 | 8.3 | $0.535 ↓ | तुलना करें | |
| 2026-06-04 13:06 नया टेस्ट जोड़ा गया | 7.3 | 6.7 | $0.292 ↓ | तुलना करें | |
| 2026-05-21 23:46 सूट बदला गया | 7.4 | 3.3 | $0.286 | तुलना करें | |
| 2026-05-08 14:41 सूट बदला गया | 7.6 | 0.0 | $0.209 | तुलना करें | |
| 2026-05-08 14:41 सूट बदला गया | 7.6 | 0.0 | $0.209 | तुलना करें | |
| 2026-04-22 12:55 पहला दर्ज रन | 7.8 | लागू नहीं | $0.201 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-22 12:55 · पहला दर्ज रन | 54/54 प्रयास | 7.8 | 8.6 | लागू नहीं | 12/18 | 3 | 57,095 | 0 | $0.201 | 24.13s |
| 2026-08-14 01:58 · दोबारा परीक्षण | 66/66 प्रयास | 7.0 | 8.4 | 8.1 | 12/22 | 4 | 215,889 | 82,592 | $1.053 | 58.80s |
| अंतर | — | +0.8 | +0.2 | 0 | -1 | -158794 | -82592 | -$0.853 | -34664ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
GLM 5.1mediumvsDeepSeek V3.2mediumGLM 5.1mediumvsGPT-5.5noneGLM 5.1mediumvsGPT-5.6 SolnoneGLM 5.1mediumvsMercury 2mediumGLM 5.1mediumvsGrok 4.3mediumGLM 5.1mediumvsGrok 4.20mediumGLM 5.1mediumvsSolar Pro 4highGLM 5.1mediumvsSeed-2.0-MinimediumGLM 5.1mediumvsStep 3.7 FlashlowGLM 5.1mediumvsKimi K2.5medium
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 10.0 | 10.0 | |
| कोडिंग | 4.7 | 1.6 | |
| संयुक्त | 9.5 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| निर्देश पालन | 6.4 | 5.8 | |
| पहेली समाधान | 8.2 | 7.2 | |
| टूल कॉलिंग | 3.0 | 10.0 |