نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs StepFun: Step 3.7 Flash

خلاصہ

average score تقریباً برابر ہے: 7.7 vs 7.7. Step 3.7 Flash (low) کی benchmark لاگت کم ہے: $0.341 vs $1.270. Claude Opus 4.8 (low) تیز ہے: 10.83s vs 15.74s، pass rates 79.4% vs 68.3%.

تجویز کردہ ماڈلStep 3.7 Flash (low)It has the best score here (7.7), while costing about 3.7x less than Claude Opus 4.8 (low).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک Claude Opus 4.8 Claude Opus 4.8 low اجرا: 2026-05-28 Step 3.7 Flash Step 3.7 Flash low اجرا: 2026-05-29
اسکور 7.7 7.7
درجہ #47 #51
اعتماد پذیری 10.0 10.0
تسلسل 8.8 8.4
درست ٹیسٹس
فی کوشش کامیابی کی شرح 79.4% 68.3%
غیر مستحکم ٹیسٹ 3 4
کل رنز 63 63
فی نتیجہ لاگت 8.466 2.840
کل لاگت $1.270 $0.341
ان پٹ قیمت $5.000 / 1M $0.200 / 1M
آؤٹ پٹ قیمت $25.000 / 1M $1.150 / 1M
کل ان پٹ ٹوکنز 60,946 40,101
آؤٹ پٹ ٹوکنز 31,771 289,325
ریزننگ ٹوکنز 6,831 0
ردِعمل کا وقت (اوسط) 10.83s 15.74s
ردِعمل کا وقت (زیادہ سے زیادہ) 127.97s 124.75s
ردِعمل کا وقت (کل) 227.39s 330.63s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Opus 4.8

low
لاگت
$0.031
وقت
14.1s
ٹوکنز
1,345 tok

#51 Step 3.7 Flash

low
غلط SVG
لاگت
$0.004
وقت
25.3s
ٹوکنز
3,072 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں