#28

Gemma 4 26B A4B

Google اجرا: 2026-04-03 ٹیسٹ کیا گیا: 2026-04-22 21:39 google/gemma-4-26b-a4b-it::medium

25.2B کل (3.8B فعال)MoEکھلا ماخذ

(medium) (none)

خلاصہ

Gemma 4 26B A4B AI BENCHY پر 8.0 اسکور کرتا ہے اور #28 پر ہے۔ اس کی reliability دستیاب نہیں، pass rate 75.9%، کل لاگت $0.028، اور اوسط response time 25.03s ہے۔

Gemma 4 26B A4B کو منفرد کیا بناتا ہے: اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

شائع شدہ

پیرامیٹرز: 25.2B کل (3.8B فعال)
ساخت: MoE
دستیابی: کھلا ماخذ
لائسنس: Apache-2.0

پیرامیٹرز کا ماخذ دستیابی کا ماخذ

اسکور

8.0

تسلسل

9.0

اعتماد پذیری

دستیاب نہیں

کل لاگت (موجودہ قیمت)

$0.028

کل آؤٹ پٹ ٹوکنز

60,559

کل ان پٹ ٹوکنز

ان پٹ قیمت

$0.070 / 1M

آؤٹ پٹ قیمت

$0.340 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 5

فی کوشش کامیابی کی شرح: 75.9%

غیر مستحکم ٹیسٹ

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

25.03s

ردِعمل کا وقت (زیادہ سے زیادہ): 147.47s

ردِعمل کا وقت (کل): 425.48s

ٹائم آؤٹ: 2 غلط جواب: 2 ہدایات پر عمل نہیں کیا: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#28 Gemma 4 26B A4B

medium

غلط SVG

لاگت: $0.000
وقت: 300.0s
ٹوکنز: 0 tok

رن ہسٹری

ٹیسٹ کیا گیا	اسکور	اعتماد پذیری	کل لاگت	موازنہ کریں
2026-08-14 02:53 دوبارہ ٹیسٹ	6.8	10.0	$0.111 ↑	موازنہ کریں
2026-07-16 23:43 نیا ٹیسٹ شامل ہوا	6.6	9.4	$0.082 ↓	موازنہ کریں
2026-06-04 14:22 نیا ٹیسٹ شامل ہوا	7.6	8.9	$0.045 ↓	موازنہ کریں
2026-05-22 00:42 سوٹ بدل گیا	7.5	10.0	$0.045	موازنہ کریں
2026-04-22 21:39 پہلا ریکارڈ شدہ رن	8.0	دستیاب نہیں	$0.028	موجودہ رن

رن موازنہ

رن	بینچ مارک کوریج	اسکور	تسلسل	اعتماد پذیری	درست ٹیسٹس	غیر مستحکم ٹیسٹ	کل آؤٹ پٹ ٹوکنز	کل ان پٹ ٹوکنز	کل لاگت	ردِعمل کا وقت (اوسط)
2026-04-22 21:39 · پہلا ریکارڈ شدہ رن	54/54 کوششیں	8.0	9.0	دستیاب نہیں	13/18	2	60,559	0	$0.028	25.03s
2026-06-04 14:22 · نیا ٹیسٹ شامل ہوا	63/63 کوششیں	7.6	9.2	8.9	14/21	2	128,490	40,252	$0.045	63.41s
فرق	—	+0.5	-0.2		-1	0	-67931	-40252	-$0.017	-38386ms

بینچ مارک کوریج مختلف ہے: 54/54 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 63/63 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ	اسکور	تسلسل
اینٹی اے آئی چالیں	10.0	10.0
کوڈنگ	2.8	10.0
مشترکہ	9.6	10.0
ڈیٹا پارسنگ اور استخراج	10.0	10.0
ڈومین مخصوص	2.9	4.4
عمومی ذہانت	10.0	10.0
ہدایات کی پیروی	10.0	10.0
پہیلی حل کرنا	7.9	9.6
ٹول کالنگ	10.0	10.0

Gemma 4 26B A4B

ماڈل کی تفصیلات

Hamster playing table tennis

#28 Gemma 4 26B A4B

چارٹس

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور vs کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

موازنہ کیے گئے ماڈلز