AI BENCHY
Advertise here
#56

Step 3.7 Flash

Stepfun اجرا: 2026-05-29 ٹیسٹ کیا گیا: 2026-06-04 13:49 stepfun/step-3.7-flash::low
198B کل (11B فعال)MoEکھلا ماخذ

خلاصہ

Step 3.7 Flash AI BENCHY پر 7.3 اسکور کرتا ہے اور #56 پر ہے۔ اس کی reliability 10.0، pass rate 68.3%، کل لاگت $0.341، اور اوسط response time 15.74s ہے۔

Step 3.7 Flash کو منفرد کیا بناتا ہے: یہ مشترکہ میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ عمومی ذہانت اس کا کمزور ترین حصہ ہے، rank #18.

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

شائع شدہ
پیرامیٹرز
198B کل (11B فعال)
ساخت
MoE
دستیابی
کھلا ماخذ
لائسنس
Apache-2.0

تسلسل

8.4

کل آؤٹ پٹ ٹوکنز

289,325

کل ان پٹ ٹوکنز

40,101

ان پٹ قیمت

$0.200 / 1M

آؤٹ پٹ قیمت

$1.150 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 9

فی کوشش کامیابی کی شرح: 68.3%

غیر مستحکم ٹیسٹ

4

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

15.74s

ردِعمل کا وقت (زیادہ سے زیادہ): 124.75s

ردِعمل کا وقت (کل): 330.63s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Step 3.7 Flash

low
غلط SVG
لاگت
$0.004
وقت
25.3s
ٹوکنز
3,072 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 02:29 دوبارہ ٹیسٹ 7.1 10.0 $0.390 موازنہ کریں
2026-07-16 22:46 نیا ٹیسٹ شامل ہوا 7.3 10.0 $0.454 موازنہ کریں
2026-06-04 13:49 نیا ٹیسٹ شامل ہوا 7.3 10.0 $0.341 موجودہ رن
2026-05-29 11:49 پہلا رن 7.4 10.0 $0.336 موازنہ کریں

اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-06-04 13:49 · نیا ٹیسٹ شامل ہوا63/63 کوششیں7.38.410.012/214289,32540,101$0.34115.74s
2026-07-16 22:46 · نیا ٹیسٹ شامل ہوا66/66 کوششیں7.38.110.012/225376,581103,833$0.45420.68s
فرق0.0+0.30.00-1-87256-63732-$0.114-4938ms

بینچ مارک کوریج مختلف ہے: 63/63 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 66/66 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

قیمت کی تاریخ

OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔

تاریخ ان پٹ قیمت آؤٹ پٹ قیمت
2026-06-04 14:42 $0.200 / 1M $1.150 / 1M

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 8.7 7.9
کوڈنگ 8.2 7.2
مشترکہ 10.0 10.0
ڈیٹا پارسنگ اور استخراج 7.3 5.8
ڈومین مخصوص 5.3 7.2
عمومی ذہانت 3.4 9.3
ہدایات کی پیروی 9.8 10.0
پہیلی حل کرنا 5.5 9.9
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز