OpenAI
اجرا: 2025-08-05
ٹیسٹ کیا گیا: 2026-04-21 12:42
openai/gpt-oss-120b::none
117B کل (5.1B فعال)MoEکھلا ماخذ
(medium)
(none)
خلاصہ
gpt-oss-120b AI BENCHY پر 5.2 اسکور کرتا ہے اور #91 پر ہے۔ اس کی reliability دستیاب نہیں، pass rate 38.9%، کل لاگت $0.009، اور اوسط response time 11.96s ہے۔
gpt-oss-120b کو منفرد کیا بناتا ہے: اس score range کے لیے اس کی کل benchmark لاگت غیر معمولی طور پر کم ہے۔
ماڈل کی تفصیلات
تحقیق کی تاریخ: 2026-08-12
- پیرامیٹرز
- 117B کل (5.1B فعال)
- ساخت
- MoE
- دستیابی
- کھلا ماخذ
- لائسنس
- Apache-2.0
5.2
تسلسل
7.9
دستیاب نہیں
$0.009
کل آؤٹ پٹ ٹوکنز
44,652
کل ان پٹ ٹوکنز
0
ان پٹ قیمت
$0.000 / 1M
آؤٹ پٹ قیمت
$0.000 / 1M
غیر مستحکم ٹیسٹ
5
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
رن ہسٹری
| ٹیسٹ کیا گیا | اسکور | اعتماد پذیری | درست ٹیسٹس | کل لاگت | موازنہ کریں |
|---|---|---|---|---|---|
| 2026-05-08 15:31 سوٹ بدل گیا | 3.7 | 10.0 | $0.010 ↓ | موازنہ کریں | |
| 2026-04-21 12:42 پہلا ریکارڈ شدہ رن | 5.2 | دستیاب نہیں | $0.009 | موجودہ رن |
رن موازنہ
| رن | بینچ مارک کوریج | اسکور | تسلسل | اعتماد پذیری | درست ٹیسٹس | غیر مستحکم ٹیسٹ | کل آؤٹ پٹ ٹوکنز | کل ان پٹ ٹوکنز | کل لاگت | ردِعمل کا وقت (اوسط) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-21 12:42 · پہلا ریکارڈ شدہ رن | 54/54 کوششیں | 5.2 | 7.9 | دستیاب نہیں | 4/18 | 5 | 44,652 | 0 | $0.009 | 11.96s |
| 2026-05-08 15:31 · سوٹ بدل گیا | 57/57 کوششیں | 3.7 | 7.8 | 10.0 | 6/19 | 2 | 51,664 | 9,081 | $0.010 | 21.61s |
| فرق | — | +1.5 | +0.1 | -2 | +3 | -7012 | -9081 | -$0.001 | -9656ms |
بینچ مارک کوریج مختلف ہے: 54/54 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 57/57 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔
ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
gpt-oss-120bnoneمفت دستیابvsLing 3.0 Tinymediumgpt-oss-120bnoneمفت دستیابvsQwen3.5-9Bmediumgpt-oss-120bnoneمفت دستیابvsLing 3.0 Tinylowgpt-oss-120bnoneمفت دستیابvsLing 3.0 Tinyhighgpt-oss-120bnoneمفت دستیابvsNemotron 3.5 Lightningnoneمفت دستیابgpt-oss-120bnoneمفت دستیابvsGranite 4.1 8Bnonegpt-oss-120bnoneمفت دستیابvsLing 3.0 Tinynonegpt-oss-120bnoneمفت دستیابvsGrok 4.20nonegpt-oss-120bnoneمفت دستیابvsGLM 4.7 Flashmediumgpt-oss-120bnoneمفت دستیابvsLaguna S 2.1noneمفت دستیاب
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| اینٹی اے آئی چالیں | 6.6 | 8.0 | |
| کوڈنگ | 4.3 | 1.1 | |
| مشترکہ | 3.0 | 10.0 | |
| ڈیٹا پارسنگ اور استخراج | 6.5 | 10.0 | |
| ڈومین مخصوص | 3.0 | 10.0 | |
| عمومی ذہانت | 4.6 | 10.0 | |
| ہدایات کی پیروی | 8.4 | 6.9 | |
| پہیلی حل کرنا | 4.5 | 4.8 | |
| ٹول کالنگ | 3.0 | 10.0 |