#48

Gemma 4 26B A4B

Google प्रकाशन: 2026-04-03 चाचणी तारीख: 2026-05-22 00:42 google/gemma-4-26b-a4b-it::medium

(medium) (none)

सारांश

Gemma 4 26B A4B AI BENCHY वर 7.5 स्कोर करते आणि #48 वर आहे. याची reliability 10.0, pass rate 70.0%, एकूण खर्च $0.045, आणि सरासरी response time 51.35s आहे.

Gemma 4 26B A4B खास का आहे: हे अँटी-एआय युक्त्या मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #16. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

स्कोअर

7.5

सुसंगतता

8.8

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.045

एकूण आउटपुट टोकन्स

111,029

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.060 / 1M

आउटपुट किंमत

$0.330 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 7

प्रति प्रयत्न पास दर: 70.0%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

51.35s

प्रतिसाद वेळ (कमाल): 369.32s

प्रतिसाद वेळ (एकूण): 975.67s

चुकीचे उत्तर: 4 वेळ संपला: 2 उत्तर नाही: 1

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#48 Gemma 4 26B A4B

medium

अवैध SVG

खर्च: $0.000
वेळ: 300.0s
टोकन्स: 0 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-06-04 14:22 नवीन चाचणी जोडली	7.6	8.9	$0.045 ↓	तुलना करा
2026-05-22 00:42 सूट बदलला	7.5	10.0	$0.045	सध्याची रन
2026-04-22 21:39 पहिली नोंदलेली रन	8.0	लागू नाही	$0.028	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-05-22 00:42 · सूट बदलला	7.5	8.8	10.0	13/20	3	111,029	$0.045	51.35s
2026-04-22 21:39 · पहिली नोंदलेली रन	8.0	9.0	लागू नाही	13/18	2	60,559	$0.028	25.03s
फरक	-0.5	-0.2		0	+1	+50470	+$0.017	+26323ms

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	10.0	10.0
कोडिंग	2.9	10.0
संयुक्त	9.6	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	2.9	4.4
Samanya Buddhimatta	10.0	10.0
सूचनांचे पालन	10.0	10.0
कोडी सोडवणे	7.7	7.3
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemma 4 26B A4B

Hamster playing table tennis

#48 Gemma 4 26B A4B

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स