نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs StepFun: Step 3.7 Flash

خلاصہ

Claude Sonnet 4.6 (medium) average score میں آگے ہے: 7.8 vs 7.7. Step 3.7 Flash (low) کی benchmark لاگت کم ہے: $0.341 vs $1.418. Step 3.7 Flash (low) تیز ہے: 15.74s vs 17.06s، pass rates 65.1% vs 68.3%.

تجویز کردہ ماڈلStep 3.7 Flash (low)Its score stays close to the best score here (7.7 vs 7.8), while costing about 4.2x less than Claude Sonnet 4.6 (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک Claude Sonnet 4.6 Claude Sonnet 4.6 medium اجرا: 2026-02-17 Step 3.7 Flash Step 3.7 Flash low اجرا: 2026-05-29
اسکور 7.8 7.7
درجہ #40 #51
اعتماد پذیری 10.0 10.0
تسلسل 9.1 8.4
درست ٹیسٹس
فی کوشش کامیابی کی شرح 65.1% 68.3%
غیر مستحکم ٹیسٹ 2 4
کل رنز 63 63
فی نتیجہ لاگت 10.904 2.840
کل لاگت $1.418 $0.341
ان پٹ قیمت $3.000 / 1M $0.200 / 1M
آؤٹ پٹ قیمت $15.000 / 1M $1.150 / 1M
کل ان پٹ ٹوکنز 49,112 40,101
آؤٹ پٹ ٹوکنز 54,703 289,325
ریزننگ ٹوکنز 29,970 0
ردِعمل کا وقت (اوسط) 17.06s 15.74s
ردِعمل کا وقت (زیادہ سے زیادہ) 46.35s 124.75s
ردِعمل کا وقت (کل) 221.83s 330.63s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#40 Claude Sonnet 4.6

medium
غلط SVG
لاگت
$0.000
وقت
300.0s
ٹوکنز
0 tok

#51 Step 3.7 Flash

low
غلط SVG
لاگت
$0.004
وقت
25.3s
ٹوکنز
3,072 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Claude Sonnet 4.6 5.7 6.6 44.4% 1 33.29s 6,995 16,089 3,686
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں