AI BENCHY
Advertise here
#65

Gemma 4 26B A4B

Google रिलीज़: 2026-04-03 परीक्षण किया गया: 2026-04-22 21:39 google/gemma-4-26b-a4b-it::none
(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY पर 6.2 स्कोर करता है और #65 पर है। इसकी reliability लागू नहीं, pass rate 48.2%, कुल लागत $0.005, और औसत response time 6.59s है।

Gemma 4 26B A4B को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।

संगति

8.7

विश्वसनीयता

लागू नहीं

कुल आउटपुट टोकन

1,783

कुल इनपुट टोकन

0

इनपुट कीमत

$0.070 / 1M

आउटपुट कीमत

$0.340 / 1M

सही परीक्षण

गलत टेस्ट: 11

प्रति प्रयास पास दर: 48.2%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

6.59s

प्रतिक्रिया समय (अधिकतम): 57.10s

प्रतिक्रिया समय (कुल): 118.61s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#65 Gemma 4 26B A4B

none
लागत
$0.001
समय
39.5s
टोकन
790 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 14:04 नया टेस्ट जोड़ा गया 6.0 10.0 $0.004 तुलना करें
2026-05-22 00:29 सूट बदला गया 6.2 10.0 $0.006 तुलना करें
2026-04-22 21:39 पहला दर्ज रन 6.2 लागू नहीं $0.005 वर्तमान रन

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-04-22 21:39 · पहला दर्ज रन6.28.7लागू नहीं7/1831,7830$0.0056.59s
2026-06-04 14:04 · नया टेस्ट जोड़ा गया6.09.210.08/2121,82440,038$0.0045.91s
अंतर+0.2-0.5-1+1-41-40038+$0.002+682ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.3 10.0
कोडिंग 4.7 1.6
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 4.4 6.9
पहेली समाधान 5.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना किए गए मॉडल