#74 Step 3.7 Flash
high- لاگت
- $0.007
- وقت
- 63.6s
- ٹوکنز
- 6,030 tok
Stepfun
اجرا: 2026-05-29
ٹیسٹ کیا گیا: 2026-05-29 11:53
stepfun/step-3.7-flash::high
خلاصہ
Step 3.7 Flash AI BENCHY پر 7.1 اسکور کرتا ہے اور #74 پر ہے۔ اس کی reliability 9.9، pass rate 65.8%، کل لاگت $0.960، اور اوسط response time 49.43s ہے۔
7.1
تسلسل
8.2
9.9
$0.960
کل آؤٹ پٹ ٹوکنز
828,084
کل ان پٹ ٹوکنز
0
ان پٹ قیمت
$0.200 / 1M
آؤٹ پٹ قیمت
$1.150 / 1M
غیر مستحکم ٹیسٹ
4
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
جنریشن شوکیس
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
رن ہسٹری
| ٹیسٹ کیا گیا | اسکور | اعتماد پذیری | درست ٹیسٹس | کل لاگت | موازنہ کریں |
|---|---|---|---|---|---|
| 2026-06-04 14:10 نیا ٹیسٹ شامل ہوا | 7.0 | 10.0 | $1.148 | موازنہ کریں | |
| 2026-05-29 11:53 پہلا رن | 7.1 | 9.9 | $0.960 | موجودہ رن |
رن موازنہ
| رن | اسکور | تسلسل | اعتماد پذیری | درست ٹیسٹس | غیر مستحکم ٹیسٹ | کل آؤٹ پٹ ٹوکنز | کل ان پٹ ٹوکنز | کل لاگت | ردِعمل کا وقت (اوسط) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-29 11:53 · پہلا رن | 7.1 | 8.2 | 9.9 | 11/20 | 4 | 828,084 | 0 | $0.960 | 49.43s |
| 2026-06-04 14:10 · نیا ٹیسٹ شامل ہوا | 7.0 | 8.2 | 10.0 | 11/21 | 4 | 991,355 | 38,391 | $1.148 | 64.46s |
| فرق | +0.1 | 0.0 | -0.1 | 0 | 0 | -163271 | -38391 | -$0.189 | -15027ms |
ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور کے لحاظ سے سرفہرست ماڈلز
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
Step 3.7 FlashhighvsClaude Opus 4.8noneStep 3.7 FlashhighvsGemma 4 26B A4Bmediumمفت دستیابStep 3.7 FlashhighvsQwen3.7 PlusnoneStep 3.7 FlashhighvsClaude Sonnet 4.6noneStep 3.7 FlashhighvsGLM 5.2noneStep 3.7 FlashhighvsGemini 3.5 FlashhighStep 3.7 FlashhighvsGemini 3 Flash PreviewmediumStep 3.7 FlashhighvsNemotron 3 Ultra 550b A55bmediumمفت دستیابStep 3.7 FlashhighvsGPT-5.5low
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| اینٹی اے آئی چالیں | 10.0 | 10.0 | |
| کوڈنگ | 3.6 | 4.6 | |
| مشترکہ | 10.0 | 10.0 | |
| ڈیٹا پارسنگ اور استخراج | 10.0 | 10.0 | |
| ڈومین مخصوص | 4.1 | 4.4 | |
| عمومی ذہانت | 5.5 | 10.0 | |
| ہدایات کی پیروی | 9.8 | 10.0 | |
| پہیلی حل کرنا | 5.3 | 7.2 | |
| ٹول کالنگ | 10.0 | 10.0 | |
| معلومات عامہ | 3.0 | 10.0 |