#91

Gemma 4 26B A4B

Google प्रकाशन: 2026-04-03 चाचणी तारीख: 2026-05-22 00:29 google/gemma-4-26b-a4b-it::none

(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY वर 6.2 स्कोर करते आणि #91 वर आहे. याची reliability 10.0, pass rate 46.7%, एकूण खर्च $0.006, आणि सरासरी response time 6.00s आहे.

Gemma 4 26B A4B खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

स्कोअर

6.2

सुसंगतता

9.2

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.006

एकूण आउटपुट टोकन्स

1,815

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.060 / 1M

आउटपुट किंमत

$0.330 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 12

प्रति प्रयत्न पास दर: 46.7%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

6.00s

प्रतिसाद वेळ (कमाल): 57.10s

प्रतिसाद वेळ (एकूण): 119.98s

चुकीचे उत्तर: 9 सूचनांचे पालन केले नाही: 2 वेळ संपला: 1

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Gemma 4 26B A4B

none

खर्च: $0.001
वेळ: 39.5s
टोकन्स: 790 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-06-04 14:04 नवीन चाचणी जोडली	6.0	10.0	$0.004 ↓	तुलना करा
2026-05-22 00:29 सूट बदलला	6.2	10.0	$0.006	सध्याची रन
2026-04-22 21:39 पहिली नोंदलेली रन	6.2	लागू नाही	$0.005	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-05-22 00:29 · सूट बदलला	6.2	9.2	10.0	8/20	2	1,815	0	$0.006	6.00s
2026-06-04 14:04 · नवीन चाचणी जोडली	6.0	9.2	10.0	8/21	2	1,824	40,038	$0.004	5.91s
फरक	+0.2	0.0	0.0	0	0	-9	-40038	+$0.003	+92ms

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	8.3	10.0
कोडिंग	4.1	5.8
संयुक्त	3.0	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	3.6	7.2
Samanya Buddhimatta	4.0	10.0
सूचनांचे पालन	6.3	10.0
कोडी सोडवणे	6.2	10.0
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemma 4 26B A4B

Hamster playing table tennis

#91 Gemma 4 26B A4B

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स