#135

Gemma 4 26B A4B

Google प्रकाशन: 2026-04-03 चाचणी तारीख: 2026-08-14 02:53 google/gemma-4-26b-a4b-it::medium

25.2B एकूण (3.8B सक्रिय)MoEमुक्त स्रोत

(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY वर 6.8 स्कोर करते आणि #135 वर आहे. याची reliability 10.0, pass rate 69.7%, एकूण खर्च $0.111, आणि सरासरी response time 104.93s आहे.

Gemma 4 26B A4B खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #15.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले

पॅरामीटर्स: 25.2B एकूण (3.8B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: मुक्त स्रोत
परवाना: Apache-2.0

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

6.8

सुसंगतता

9.6

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.111 ↑ +18.7%

या किमतीवर चाचणी केली: $0.094

एकूण आउटपुट टोकन्स

253,646

एकूण इनपुट टोकन्स

77,528

इनपुट किंमत

$0.120 / 1M

आउटपुट किंमत

$0.400 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 7

प्रति प्रयत्न पास दर: 69.7%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

104.93s

प्रतिसाद वेळ (कमाल): 912.19s

प्रतिसाद वेळ (एकूण): 2203.52s

उत्तर नाही: 2 वेळ संपला: 2 चुकीचे उत्तर: 2 अवैध टूल कॉल: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 Gemma 4 26B A4B

medium

अवैध SVG

खर्च: $0.000
वेळ: 300.0s
टोकन्स: 0 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-08-14 02:53 पुन्हा चाचणी	6.8	10.0	$0.111 ↑	सध्याची रन
2026-07-16 23:43 नवीन चाचणी जोडली	6.6	9.4	$0.082 ↓	तुलना करा
2026-06-04 14:22 नवीन चाचणी जोडली	7.6	8.9	$0.045 ↓	तुलना करा
2026-05-22 00:42 सूट बदलला	7.5	10.0	$0.045	तुलना करा
2026-04-22 21:39 पहिली नोंदलेली रन	8.0	लागू नाही	$0.028	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-08-14 02:53 · सध्याची रन	66/66 प्रयत्न	6.8	9.6	10.0	15/22	1	253,646	77,528	$0.111	104.93s
2026-06-04 14:22 · नवीन चाचणी जोडली	63/63 प्रयत्न	7.6	9.2	8.9	14/21	2	128,490	40,252	$0.045	63.41s
फरक	—	-0.8	+0.4	+1.1	+1	-1	+125156	+37276	+$0.067	+41515ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख	इनपुट किंमत	आउटपुट किंमत
2026-06-04 15:40	$0.060 / 1M	$0.330 / 1M
2026-07-16 15:36	$0.100 / 1M	$0.300 / 1M
2026-07-20 15:56	$0.070 / 1M	$0.340 / 1M
2026-07-24 00:05	$0.120 / 1M	$0.350 / 1M
2026-07-28 08:40	$0.140 / 1M	$0.420 / 1M
2026-08-14 12:51	$0.120 / 1M	$0.400 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	10.0	10.0
कोडिंग	2.9	10.0
संयुक्त	6.3	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	5.3	7.2
Samanya Buddhimatta	10.0	10.0
सूचनांचे पालन	10.0	10.0
कोडी सोडवणे	10.0	10.0
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemma 4 26B A4B

मॉडेलची माहिती

Hamster playing table tennis

#135 Gemma 4 26B A4B

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स