AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#108

Gemma 4 31B

Google प्रकाशन: 2026-04-02 चाचणी तारीख: 2026-07-16 23:02 google/gemma-4-31b-it::none
30.7Bघनमुक्त स्रोत
(medium) (none)

सारांश

Gemma 4 31B AI BENCHY वर 6.2 स्कोर करते आणि #108 वर आहे. याची reliability 10.0, pass rate 48.5%, एकूण खर्च $0.035, आणि सरासरी response time 5.34s आहे.

Gemma 4 31B खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर टूल कॉलिंग हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
30.7B
आर्किटेक्चर
घन
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0

सुसंगतता

9.6

एकूण खर्च (सध्याची किंमत)

$0.035 ↑ +6.2%

या किमतीवर चाचणी केली: $0.033

एकूण आउटपुट टोकन्स

13,317

एकूण इनपुट टोकन्स

125,728

इनपुट किंमत

$0.220 / 1M

आउटपुट किंमत

$0.550 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 12

प्रति प्रयत्न पास दर: 48.5%

अस्थिर चाचण्या

1

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

5.34s

प्रतिसाद वेळ (कमाल): 29.95s

प्रतिसाद वेळ (एकूण): 106.82s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#108 Gemma 4 31B

none
खर्च
$0.001
वेळ
12.8s
टोकन्स
795 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:51 पुन्हा चाचणी 6.1 10.0 $0.018 तुलना करा
2026-07-16 23:02 नवीन चाचणी जोडली 6.2 10.0 $0.035 सध्याची रन
2026-06-04 14:04 नवीन चाचणी जोडली 6.5 10.0 $0.004 तुलना करा
2026-05-22 00:30 सूट बदलला 6.7 10.0 $0.003 तुलना करा
2026-04-14 00:56 पहिली नोंदलेली रन 6.9 लागू नाही $0.003 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-16 23:02 · नवीन चाचणी जोडली66/66 प्रयत्न6.29.610.010/22113,317125,728$0.0355.34s
2026-05-22 00:30 · सूट बदलला60/60 प्रयत्न6.710.010.010/2001,3980$0.0033.84s
फरक-0.5-0.40.00+1+11919+125728+$0.033+1501ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-04 15:40 $0.120 / 1M $0.370 / 1M
2026-06-05 23:32 $0.120 / 1M $0.360 / 1M
2026-06-12 18:42 $0.120 / 1M $0.350 / 1M
2026-07-14 10:48 $0.060 / 1M $0.350 / 1M
2026-07-16 15:36 $0.220 / 1M $0.550 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 6.5 10.0
कोडिंग 5.5 10.0
संयुक्त 3.8 5.8
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 6.5 10.0
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स