Advertise here
#65

Gemma 4 26B A4B

Google रिलीज़: 2026-04-03 परीक्षण किया गया: 2026-04-22 21:39 google/gemma-4-26b-a4b-it::none
25.2B कुल (3.8B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY पर 6.2 स्कोर करता है और #65 पर है। इसकी reliability लागू नहीं, pass rate 48.2%, कुल लागत $0.005, और औसत response time 6.59s है।

Gemma 4 26B A4B को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
25.2B कुल (3.8B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

8.7

विश्वसनीयता

लागू नहीं

कुल आउटपुट टोकन

1,783

कुल इनपुट टोकन

0

इनपुट कीमत

$0.070 / 1M

आउटपुट कीमत

$0.340 / 1M

कैश पढ़ने की कीमत

लागू नहीं

कैश लिखने की कीमत

लागू नहीं

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

सही परीक्षण

गलत टेस्ट: 11

प्रति प्रयास पास दर: 48.2%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

6.59s

प्रतिक्रिया समय (अधिकतम): 57.10s

प्रतिक्रिया समय (कुल): 118.61s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#65 Gemma 4 26B A4B

none
लागत
$0.001
समय
39.5s
टोकन
790 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 02:51 दोबारा परीक्षण 5.6 10.0 $0.023 ↑ तुलना करें
2026-07-16 23:02 नया टेस्ट जोड़ा गया 5.5 10.0 $0.018 ↓ तुलना करें
2026-06-04 14:04 नया टेस्ट जोड़ा गया 6.0 10.0 $0.004 ↓ तुलना करें
2026-05-22 00:29 सूट बदला गया 6.2 10.0 $0.006 तुलना करें
2026-04-22 21:39 पहला दर्ज रन 6.2 लागू नहीं $0.005 वर्तमान रन

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-04-22 21:39 · पहला दर्ज रन54/54 प्रयास6.28.7लागू नहीं7/1831,7830$0.0056.59s
2026-06-04 14:04 · नया टेस्ट जोड़ा गया63/63 प्रयास6.09.210.08/2121,82440,038$0.0045.91s
अंतर—+0.2-0.5-1+1-41-40038+$0.002+682ms

बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.3 10.0
कोडिंग 4.7 1.6
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 4.4 6.9
पहेली समाधान 5.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना किए गए मॉडल