AI BENCHY
Advertise here
#114

GLM 5.1

Z.ai रिलीज़: 2026-04-07 परीक्षण किया गया: 2026-05-21 23:41 z-ai/glm-5.1::none
744B कुल (40B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

GLM 5.1 AI BENCHY पर 5.6 स्कोर करता है और #114 पर है। इसकी reliability 10.0, pass rate 40.0%, कुल लागत $0.057, और औसत response time 4.16s है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
744B कुल (40B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
MIT

संगति

8.1

कुल आउटपुट टोकन

3,749

कुल इनपुट टोकन

0

इनपुट कीमत

$0.980 / 1M

आउटपुट कीमत

$3.080 / 1M

सही परीक्षण

गलत टेस्ट: 14

प्रति प्रयास पास दर: 40.0%

अस्थिर टेस्ट

5

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

4.16s

प्रतिक्रिया समय (अधिकतम): 32.57s

प्रतिक्रिया समय (कुल): 83.23s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#114 GLM 5.1

none
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 01:32 दोबारा परीक्षण 5.7 10.0 $0.238 तुलना करें
2026-07-16 21:16 नया टेस्ट जोड़ा गया 5.5 10.0 $0.164 तुलना करें
2026-06-04 13:04 नया टेस्ट जोड़ा गया 5.7 10.0 $0.058 तुलना करें
2026-05-21 23:41 सूट बदला गया 5.6 10.0 $0.057 वर्तमान रन
2026-05-08 13:04 सूट बदला गया 5.7 10.0 $0.053 तुलना करें
2026-05-08 13:04 सूट बदला गया 5.7 10.0 $0.053 तुलना करें
2026-04-22 12:55 पहला दर्ज रन 5.6 लागू नहीं $0.053 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-21 23:41 · सूट बदला गया60/60 प्रयास5.68.110.06/2053,7490$0.0574.16s
2026-07-16 21:16 · नया टेस्ट जोड़ा गया66/66 प्रयास5.58.210.07/22514,393124,209$0.1646.70s
अंतर0.0-0.10.0-10-10644-124209-$0.108-2538ms

बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 4.0 6.3
कोडिंग 4.3 9.5
संयुक्त 2.8 2.1
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 5.0 10.0
निर्देश पालन 9.8 10.0
पहेली समाधान 6.1 7.8
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल