#65

Gemma 4 26B A4B

Google प्रकाशन: 2026-04-03 चाचणी तारीख: 2026-04-22 21:39 google/gemma-4-26b-a4b-it::none

25.2B एकूण (3.8B सक्रिय)MoEमुक्त स्रोत

(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY वर 6.2 स्कोर करते आणि #65 वर आहे. याची reliability लागू नाही, pass rate 48.2%, एकूण खर्च $0.005, आणि सरासरी response time 6.59s आहे.

Gemma 4 26B A4B खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले

पॅरामीटर्स: 25.2B एकूण (3.8B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: मुक्त स्रोत
परवाना: Apache-2.0

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

6.2

सुसंगतता

8.7

विश्वसनीयता

लागू नाही

एकूण खर्च (सध्याची किंमत)

$0.005

एकूण आउटपुट टोकन्स

1,783

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.070 / 1M

आउटपुट किंमत

$0.340 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 11

प्रति प्रयत्न पास दर: 48.2%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

6.59s

प्रतिसाद वेळ (कमाल): 57.10s

प्रतिसाद वेळ (एकूण): 118.61s

चुकीचे उत्तर: 7 सूचनांचे पालन केले नाही: 3 वेळ संपला: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#65 Gemma 4 26B A4B

none

खर्च: $0.001
वेळ: 39.5s
टोकन्स: 790 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-08-14 02:51 पुन्हा चाचणी	5.6	10.0	$0.023 ↑	तुलना करा
2026-07-16 23:02 नवीन चाचणी जोडली	5.5	10.0	$0.018 ↓	तुलना करा
2026-06-04 14:04 नवीन चाचणी जोडली	6.0	10.0	$0.004 ↓	तुलना करा
2026-05-22 00:29 सूट बदलला	6.2	10.0	$0.006	तुलना करा
2026-04-22 21:39 पहिली नोंदलेली रन	6.2	लागू नाही	$0.005	सध्याची रन

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-04-22 21:39 · पहिली नोंदलेली रन	54/54 प्रयत्न	6.2	8.7	लागू नाही	7/18	3	1,783	0	$0.005	6.59s
2026-07-16 23:02 · नवीन चाचणी जोडली	66/66 प्रयत्न	5.5	9.2	10.0	8/22	2	15,781	131,282	$0.018	7.64s
फरक	—	+0.7	-0.5		-1	+1	-13998	-131282	-$0.013	-1046ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	8.3	10.0
कोडिंग	4.7	1.6
संयुक्त	3.0	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	3.6	7.2
Samanya Buddhimatta	4.0	10.0
सूचनांचे पालन	4.4	6.9
कोडी सोडवणे	5.7	10.0
टूल कॉलिंग	10.0	10.0

Gemma 4 26B A4B

मॉडेलची माहिती

Hamster playing table tennis

#65 Gemma 4 26B A4B

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स