AI BENCHY
Advertise here
#53

Gemma 4 31B

Google اجرا: 2026-04-02 ٹیسٹ کیا گیا: 2026-04-14 00:56 google/gemma-4-31b-it::none
30.7Bگنجانکھلا ماخذ
(medium) (none)

خلاصہ

Gemma 4 31B AI BENCHY پر 6.9 اسکور کرتا ہے اور #53 پر ہے۔ اس کی reliability دستیاب نہیں، pass rate 55.6%، کل لاگت $0.003، اور اوسط response time 4.02s ہے۔

Gemma 4 31B کو منفرد کیا بناتا ہے: یہ ڈومین مخصوص میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ اینٹی اے آئی چالیں اس کا کمزور ترین حصہ ہے، rank #18. اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔ یہ ملتے جلتے models کے مقابلے میں نمایاں طور پر تیز ہے۔

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

شائع شدہ
پیرامیٹرز
30.7B
ساخت
گنجان
دستیابی
کھلا ماخذ
لائسنس
Apache-2.0

تسلسل

10.0

اعتماد پذیری

دستیاب نہیں

کل آؤٹ پٹ ٹوکنز

1,359

کل ان پٹ ٹوکنز

0

ان پٹ قیمت

$0.130 / 1M

آؤٹ پٹ قیمت

$0.380 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 8

فی کوشش کامیابی کی شرح: 55.6%

غیر مستحکم ٹیسٹ

0

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

4.02s

ردِعمل کا وقت (زیادہ سے زیادہ): 26.13s

ردِعمل کا وقت (کل): 64.33s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 Gemma 4 31B

none
لاگت
$0.001
وقت
12.8s
ٹوکنز
795 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 02:51 دوبارہ ٹیسٹ 6.1 10.0 $0.018 موازنہ کریں
2026-07-16 23:02 نیا ٹیسٹ شامل ہوا 6.2 10.0 $0.035 موازنہ کریں
2026-06-04 14:04 نیا ٹیسٹ شامل ہوا 6.5 10.0 $0.004 موازنہ کریں
2026-05-22 00:30 سوٹ بدل گیا 6.7 10.0 $0.003 موازنہ کریں
2026-04-14 00:56 پہلا ریکارڈ شدہ رن 6.9 دستیاب نہیں $0.003 موجودہ رن

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-04-14 00:56 · پہلا ریکارڈ شدہ رن54/54 کوششیں6.910.0دستیاب نہیں10/1801,3590$0.0034.02s
2026-08-14 02:51 · دوبارہ ٹیسٹ66/66 کوششیں6.19.610.09/22113,317125,703$0.0185.41s
فرق+0.8+0.4+1-1-11958-125703-$0.015-1385ms

بینچ مارک کوریج مختلف ہے: 54/54 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 66/66 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 6.5 10.0
کوڈنگ 10.0 10.0
مشترکہ 3.0 10.0
ڈیٹا پارسنگ اور استخراج 10.0 10.0
ڈومین مخصوص 7.7 10.0
عمومی ذہانت 10.0 10.0
ہدایات کی پیروی 6.5 10.0
پہیلی حل کرنا 5.5 10.0
ٹول کالنگ 3.0 10.0

موازنہ کیے گئے ماڈلز