#52 GLM 5.1
medium- खर्च
- $0.000
- वेळ
- 300.0s
- टोकन्स
- 0 tok
सारांश
GLM 5.1 AI BENCHY वर 7.4 स्कोर करते आणि #52 वर आहे. याची reliability 3.3, pass rate 71.7%, एकूण खर्च $0.286, आणि सरासरी response time 32.22s आहे.
GLM 5.1 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
7.4
सुसंगतता
8.3
3.3
$0.286
एकूण आउटपुट टोकन्स
83,351
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.980 / 1M
आउटपुट किंमत
$3.080 / 1M
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 01:58 पुन्हा चाचणी | 7.0 | 8.1 | $1.053 ↑ | तुलना करा | |
| 2026-07-16 21:29 नवीन चाचणी जोडली | 7.1 | 8.3 | $0.535 ↓ | तुलना करा | |
| 2026-06-04 13:06 नवीन चाचणी जोडली | 7.3 | 6.7 | $0.292 ↓ | तुलना करा | |
| 2026-05-21 23:46 सूट बदलला | 7.4 | 3.3 | $0.286 | सध्याची रन | |
| 2026-05-08 14:41 सूट बदलला | 7.6 | 0.0 | $0.209 | तुलना करा | |
| 2026-05-08 14:41 सूट बदलला | 7.6 | 0.0 | $0.209 | तुलना करा | |
| 2026-04-22 12:55 पहिली नोंदलेली रन | 7.8 | लागू नाही | $0.201 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-21 23:46 · सूट बदलला | 60/60 प्रयत्न | 7.4 | 8.3 | 3.3 | 12/20 | 4 | 83,351 | 0 | $0.286 | 32.22s |
| 2026-08-14 01:58 · पुन्हा चाचणी | 66/66 प्रयत्न | 7.0 | 8.4 | 8.1 | 12/22 | 4 | 215,889 | 82,592 | $1.053 | 58.80s |
| फरक | — | +0.4 | -0.1 | -4.8 | 0 | 0 | -132538 | -82592 | -$0.768 | -26573ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 4.7 | 1.6 | |
| संयुक्त | 9.5 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 6.4 | 5.8 | |
| कोडी सोडवणे | 8.2 | 7.2 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |