AI BENCHY
Advertise here
#148

GLM 4.7 Flash

Z.ai रिलीज़: 2026-01-19 परीक्षण किया गया: 2026-05-21 23:50 z-ai/glm-4.7-flash::medium
30B कुल (3B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

GLM 4.7 Flash AI BENCHY पर 4.5 स्कोर करता है और #148 पर है। इसकी reliability 8.3, pass rate 35.0%, कुल लागत $0.054, और औसत response time 35.09s है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
30B कुल (3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
MIT

संगति

6.7

कुल आउटपुट टोकन

132,820

कुल इनपुट टोकन

0

इनपुट कीमत

$0.060 / 1M

आउटपुट कीमत

$0.400 / 1M

सही परीक्षण

गलत टेस्ट: 16

प्रति प्रयास पास दर: 35.0%

अस्थिर टेस्ट

8

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

35.09s

प्रतिक्रिया समय (अधिकतम): 174.55s

प्रतिक्रिया समय (कुल): 456.18s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#148 GLM 4.7 Flash

medium
अमान्य SVG
लागत
$0.000
समय
186.2s
टोकन
12,112 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 01:33 दोबारा परीक्षण 4.3 8.6 $0.168 तुलना करें
2026-07-16 22:32 नया टेस्ट जोड़ा गया 4.3 7.8 $0.166 तुलना करें
2026-06-04 13:29 नया टेस्ट जोड़ा गया 4.4 6.7 $0.054 तुलना करें
2026-05-21 23:50 सूट बदला गया 4.5 8.3 $0.054 वर्तमान रन
2026-04-11 01:19 पहला दर्ज रन 4.6 लागू नहीं $0.046 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-21 23:50 · सूट बदला गया60/60 प्रयास4.56.78.34/208132,8200$0.05435.09s
2026-06-04 13:29 · नया टेस्ट जोड़ा गया63/63 प्रयास4.46.86.74/218132,83337,206$0.05435.10s
अंतर+0.1-0.1+1.600-13-37206-$0.001-4ms

बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 4.7 5.9
कोडिंग 3.4 6.0
संयुक्त 2.8 2.1
डेटा पार्सिंग और निष्कर्षण 6.3 10.0
डोमेन-विशिष्ट 3.5 4.4
Samanya Buddhimatta 3.6 9.7
निर्देश पालन 6.2 5.8
पहेली समाधान 2.9 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल