نیویگیشن
Advertise here

Mercury 2.5 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) average score میں آگے ہے: 7.2 vs 6.5. Mercury 2.5 (high) کی benchmark لاگت کم ہے: $0.044 vs $0.449. Mercury 2.5 (high) تیز ہے: 7.62s vs 20.72s، pass rates 59.4% vs 63.8%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-24

موازنہ کیے گئے ماڈلز

درجہ
#234
کل آؤٹ پٹ ٹوکنز
193,676
ردِعمل کا وقت (اوسط)
7.62s
کل لاگت
$0.044
درجہ
#179
کل آؤٹ پٹ ٹوکنز
339,108
ردِعمل کا وقت (اوسط)
20.72s
کل لاگت
$0.449
تجویز کردہ ماڈل Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 7.2), while costing about 10.3x less than Step 3.7 Flash (low).

تفصیلی موازنہ

میٹرک Mercury 2.5 Mercury 2.5 high اجرا: 2026-09-08 Step 3.7 Flash Step 3.7 Flash low اجرا: 2026-05-29
اسکور 6.5 7.2
درجہ #234 #179
اعتماد پذیری 9.8 10.0
تسلسل 8.7 7.9
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 59.4% 63.8%
غیر مستحکم ٹیسٹ 4 6
کل رنز 69 69
فی نتیجہ لاگت 0.362 4.078
کل لاگت $0.044 $0.449
ان پٹ قیمت $0.040 / 1M $0.200 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $1.150 / 1M
کیش پڑھنے کی قیمت $0.004 / 1M $0.040 / 1M
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 358,562 292,685
آؤٹ پٹ ٹوکنز 4,266 339,108
ریزننگ ٹوکنز 189,410 0
ردِعمل کا وقت (اوسط) 7.62s 20.72s
ردِعمل کا وقت (زیادہ سے زیادہ) 80.30s 124.75s
ردِعمل کا وقت (کل) 175.36s 476.67s
پیرامیٹرز ~100B 198B کل (11B فعال)
دستیابی بند ماخذ کھلا ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#234 Mercury 2.5

high
لاگت
$0.001
وقت
3.5s
ٹوکنز
2,447 tok

#179 Step 3.7 Flash

low
غلط SVG
لاگت
$0.004
وقت
25.3s
ٹوکنز
3,072 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

موازنہ کی جوڑی تبدیل کریں