#108 Gemma 4 31B
none- खर्च
- $0.001
- वेळ
- 12.8s
- टोकन्स
- 795 tok
सारांश
Gemma 4 31B AI BENCHY वर 6.2 स्कोर करते आणि #108 वर आहे. याची reliability 10.0, pass rate 48.5%, एकूण खर्च $0.035, आणि सरासरी response time 5.34s आहे.
Gemma 4 31B खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर टूल कॉलिंग हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
6.2
सुसंगतता
9.6
10.0
एकूण आउटपुट टोकन्स
13,317
एकूण इनपुट टोकन्स
125,728
इनपुट किंमत
$0.220 / 1M
आउटपुट किंमत
$0.550 / 1M
अस्थिर चाचण्या
1
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:51 पुन्हा चाचणी | 6.1 | 10.0 | $0.018 ↓ | तुलना करा | |
| 2026-07-16 23:02 नवीन चाचणी जोडली | 6.2 | 10.0 | $0.035 ↑ | सध्याची रन | |
| 2026-06-04 14:04 नवीन चाचणी जोडली | 6.5 | 10.0 | $0.004 ↓ | तुलना करा | |
| 2026-05-22 00:30 सूट बदलला | 6.7 | 10.0 | $0.003 | तुलना करा | |
| 2026-04-14 00:56 पहिली नोंदलेली रन | 6.9 | लागू नाही | $0.003 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 23:02 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 6.2 | 9.6 | 10.0 | 10/22 | 1 | 13,317 | 125,728 | $0.035 | 5.34s |
| 2026-05-22 00:30 · सूट बदलला | 60/60 प्रयत्न | 6.7 | 10.0 | 10.0 | 10/20 | 0 | 1,398 | 0 | $0.003 | 3.84s |
| फरक | — | -0.5 | -0.4 | 0.0 | 0 | +1 | +11919 | +125728 | +$0.033 | +1501ms |
बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-04 15:40 | $0.120 / 1M | $0.370 / 1M |
| 2026-06-05 23:32 | $0.120 / 1M | $0.360 / 1M |
| 2026-06-12 18:42 | $0.120 / 1M | $0.350 / 1M |
| 2026-07-14 10:48 | $0.060 / 1M | $0.350 / 1M |
| 2026-07-16 15:36 | $0.220 / 1M | $0.550 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 6.5 | 10.0 | |
| कोडिंग | 5.5 | 10.0 | |
| संयुक्त | 3.8 | 5.8 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 6.5 | 10.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |