#135

Gemma 4 26B A4B

Google रिलीज़: 2026-04-03 परीक्षण किया गया: 2026-08-14 02:53 google/gemma-4-26b-a4b-it::medium

25.2B कुल (3.8B सक्रिय)MoEमुक्त स्रोत

(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY पर 6.8 स्कोर करता है और #135 पर है। इसकी reliability 10.0, pass rate 69.7%, कुल लागत $0.111, और औसत response time 104.93s है।

Gemma 4 26B A4B को अलग क्या बनाता है: यह निर्देश पालन में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #15 पर है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित

पैरामीटर: 25.2B कुल (3.8B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: मुक्त स्रोत
लाइसेंस: Apache-2.0

पैरामीटर स्रोत उपलब्धता स्रोत

स्कोर

6.8

संगति

9.6

विश्वसनीयता

10.0

कुल लागत (वर्तमान कीमत)

$0.111 ↑ +18.7%

परीक्षण के समय: $0.094

कुल आउटपुट टोकन

253,646

कुल इनपुट टोकन

77,528

इनपुट कीमत

$0.120 / 1M

आउटपुट कीमत

$0.400 / 1M

सही परीक्षण

गलत टेस्ट: 7

प्रति प्रयास पास दर: 69.7%

अस्थिर टेस्ट

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

104.93s

प्रतिक्रिया समय (अधिकतम): 912.19s

प्रतिक्रिया समय (कुल): 2203.52s

कोई उत्तर नहीं: 2 समय समाप्त: 2 गलत उत्तर: 2 अमान्य टूल कॉल: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 Gemma 4 26B A4B

medium

अमान्य SVG

लागत: $0.000
समय: 300.0s
टोकन: 0 tok

रन इतिहास

परीक्षण किया गया	स्कोर	विश्वसनीयता	कुल लागत	तुलना करें
2026-08-14 02:53 दोबारा परीक्षण	6.8	10.0	$0.111 ↑	वर्तमान रन
2026-07-16 23:43 नया टेस्ट जोड़ा गया	6.6	9.4	$0.082 ↓	तुलना करें
2026-06-04 14:22 नया टेस्ट जोड़ा गया	7.6	8.9	$0.045 ↓	तुलना करें
2026-05-22 00:42 सूट बदला गया	7.5	10.0	$0.045	तुलना करें
2026-04-22 21:39 पहला दर्ज रन	8.0	लागू नहीं	$0.028	तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रन	बेंचमार्क कवरेज	स्कोर	संगति	विश्वसनीयता	सही परीक्षण	अस्थिर टेस्ट	कुल आउटपुट टोकन	कुल इनपुट टोकन	कुल लागत	प्रतिक्रिया समय (औसत)
2026-08-14 02:53 · वर्तमान रन	66/66 प्रयास	6.8	9.6	10.0	15/22	1	253,646	77,528	$0.111	104.93s
2026-04-22 21:39 · पहला दर्ज रन	54/54 प्रयास	8.0	9.0	लागू नहीं	13/18	2	60,559	0	$0.028	25.03s
अंतर	—	-1.3	+0.6		+2	-1	+193087	+77528	+$0.083	+79901ms

बेंचमार्क कवरेज अलग है: 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख	इनपुट कीमत	आउटपुट कीमत
2026-06-04 15:40	$0.060 / 1M	$0.330 / 1M
2026-07-16 15:36	$0.100 / 1M	$0.300 / 1M
2026-07-20 15:56	$0.070 / 1M	$0.340 / 1M
2026-07-24 00:05	$0.120 / 1M	$0.350 / 1M
2026-07-28 08:40	$0.140 / 1M	$0.420 / 1M
2026-08-14 12:51	$0.120 / 1M	$0.400 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी	स्कोर	संगति
एंटी-एआई ट्रिक्स	10.0	10.0
कोडिंग	2.9	10.0
संयुक्त	6.3	10.0
डेटा पार्सिंग और निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	5.3	7.2
Samanya Buddhimatta	10.0	10.0
निर्देश पालन	10.0	10.0
पहेली समाधान	10.0	10.0
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemma 4 26B A4B

मॉडल विवरण

Hamster playing table tennis

#135 Gemma 4 26B A4B

चार्ट

स्कोर के अनुसार शीर्ष मॉडल

स्कोर vs कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

तुलना किए गए मॉडल