Advertise here
#520

Groundhog 1

Baseten اجرا: 2026-11-20 ٹیسٹ کیا گیا: 2026-11-22 00:13 baseten/groundhog-1::none
26B کل (4B فعال)MoEکھلا ماخذ

خلاصہ

Groundhog 1 AI BENCHY پر 2.5 اسکور کرتا ہے اور #520 پر ہے۔ اس کی reliability 10.0، pass rate 21.7%، کل لاگت $0.002، اور اوسط response time 671ms ہے۔

Groundhog 1 کو منفرد کیا بناتا ہے: یہ ڈیٹا پارسنگ اور استخراج میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ کوڈنگ اس کا کمزور ترین حصہ ہے، rank #13.

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-11-22

شائع شدہ
پیرامیٹرز
26B کل (4B فعال)
ساخت
MoE
دستیابی
کھلا ماخذ
لائسنس
MIT AND Apache-2.0

تسلسل

5.2

کل آؤٹ پٹ ٹوکنز

69

کل ان پٹ ٹوکنز

54,825

ان پٹ قیمت

$0.035 / 1M

آؤٹ پٹ قیمت

$0.000 / 1M

کیش پڑھنے کی قیمت

دستیاب نہیں

کیش میں لکھنے کی قیمت

دستیاب نہیں

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

درست ٹیسٹس

غلط ٹیسٹس: 7

فی کوشش کامیابی کی شرح: 21.7%

بینچ مارک کوریج: 36/69 کوششیں. اڈاپٹر انتخاب فراہم کرتے ہیں۔ 12/23 ٹیسٹ معاونت یافتہ ہیں۔ باقی ٹیسٹ غیر معاون ہیں، ناکام نہیں۔ اسکور پورے ٹیسٹ مجموعے پر مبنی ہے۔

غیر مستحکم ٹیسٹ

0

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

671ms

ردِعمل کا وقت (زیادہ سے زیادہ): 1.04s

ردِعمل کا وقت (کل): 8.05s

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
خودمختار ایجنٹ کے کام 0.0 0.0
اینٹی اے آئی چالیں 4.0 7.5
کوڈنگ 2.4 6.7
مشترکہ 0.0 0.0
ڈیٹا پارسنگ اور استخراج 10.0 10.0
ڈومین مخصوص 5.3 10.0
عمومی ذہانت 0.0 0.0
ہدایات کی پیروی 1.5 5.0
پہیلی حل کرنا 3.3 3.3
ٹول کالنگ 0.0 0.0
معلومات عامہ 0.0 0.0

موازنہ کیے گئے ماڈلز