AI BENCHY
Advertise here
#91

Gemma 4 26B A4B

Google اجرا: 2026-04-03 ٹیسٹ کیا گیا: 2026-05-22 00:29 google/gemma-4-26b-a4b-it::none
25.2B کل (3.8B فعال)MoEکھلا ماخذ
(medium) (none)

خلاصہ

Gemma 4 26B A4B AI BENCHY پر 6.2 اسکور کرتا ہے اور #91 پر ہے۔ اس کی reliability 10.0، pass rate 46.7%، کل لاگت $0.006، اور اوسط response time 6.00s ہے۔

Gemma 4 26B A4B کو منفرد کیا بناتا ہے: اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

شائع شدہ
پیرامیٹرز
25.2B کل (3.8B فعال)
ساخت
MoE
دستیابی
کھلا ماخذ
لائسنس
Apache-2.0

تسلسل

9.2

کل آؤٹ پٹ ٹوکنز

1,815

کل ان پٹ ٹوکنز

0

ان پٹ قیمت

$0.060 / 1M

آؤٹ پٹ قیمت

$0.330 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 12

فی کوشش کامیابی کی شرح: 46.7%

غیر مستحکم ٹیسٹ

2

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

6.00s

ردِعمل کا وقت (زیادہ سے زیادہ): 57.10s

ردِعمل کا وقت (کل): 119.98s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Gemma 4 26B A4B

none
لاگت
$0.001
وقت
39.5s
ٹوکنز
790 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 02:51 دوبارہ ٹیسٹ 5.6 10.0 $0.023 موازنہ کریں
2026-07-16 23:02 نیا ٹیسٹ شامل ہوا 5.5 10.0 $0.018 موازنہ کریں
2026-06-04 14:04 نیا ٹیسٹ شامل ہوا 6.0 10.0 $0.004 موازنہ کریں
2026-05-22 00:29 سوٹ بدل گیا 6.2 10.0 $0.006 موجودہ رن
2026-04-22 21:39 پہلا ریکارڈ شدہ رن 6.2 دستیاب نہیں $0.005 موازنہ کریں

اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-05-22 00:29 · سوٹ بدل گیا60/60 کوششیں6.29.210.08/2021,8150$0.0066.00s
2026-08-14 02:51 · دوبارہ ٹیسٹ66/66 کوششیں5.69.610.09/22115,781131,257$0.0237.58s
فرق+0.6-0.40.0-1+1-13966-131257-$0.017-1584ms

بینچ مارک کوریج مختلف ہے: 60/60 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 66/66 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 8.3 10.0
کوڈنگ 4.1 5.8
مشترکہ 3.0 10.0
ڈیٹا پارسنگ اور استخراج 10.0 10.0
ڈومین مخصوص 3.6 7.2
عمومی ذہانت 4.0 10.0
ہدایات کی پیروی 6.3 10.0
پہیلی حل کرنا 6.2 10.0
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز