نیویگیشن
Advertise here

Claude Sonnet 5.5 (medium) vs Mercury 2.5 (high)

average score تقریباً برابر ہے: 6.5 vs 6.5. Mercury 2.5 (high) کی benchmark لاگت کم ہے: $0.044 vs $1.100. Mercury 2.5 (high) تیز ہے: 7.62s vs 8.03s، pass rates 40.6% vs 59.4%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-01

موازنہ کیے گئے ماڈلز

درجہ
#192
کل آؤٹ پٹ ٹوکنز
37,748
ردِعمل کا وقت (اوسط)
8.03s
کل لاگت
$1.100
درجہ
#195
کل آؤٹ پٹ ٹوکنز
193,676
ردِعمل کا وقت (اوسط)
7.62s
کل لاگت
$0.044
تجویز کردہ ماڈل Mercury 2.5 (high)

It has the best score here (6.5), while costing about 25.3x less than Claude Sonnet 5.5 (medium).

تفصیلی موازنہ

میٹرک Claude Sonnet 5.5 Claude Sonnet 5.5 medium اجرا: 2026-09-29 Mercury 2.5 Mercury 2.5 high اجرا: 2026-09-08
اسکور 6.5 6.5
درجہ #192 #195
اعتماد پذیری 10.0 9.8
تسلسل 9.7 8.7
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 40.6% 59.4%
غیر مستحکم ٹیسٹ 1 4
کل رنز 69 69
فی نتیجہ لاگت 12.221 0.362
کل لاگت $1.100 $0.044
ان پٹ قیمت $2.000 / 1M $0.040 / 1M
آؤٹ پٹ قیمت $10.000 / 1M $0.150 / 1M
کل ان پٹ ٹوکنز 361,183 358,562
آؤٹ پٹ ٹوکنز 26,609 4,266
ریزننگ ٹوکنز 11,139 189,410
ردِعمل کا وقت (اوسط) 8.03s 7.62s
ردِعمل کا وقت (زیادہ سے زیادہ) 51.18s 80.30s
ردِعمل کا وقت (کل) 184.80s 175.36s
پیرامیٹرز ~1T کل (~100B فعال) ~100B
دستیابی بند ماخذ بند ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#192 Claude Sonnet 5.5

medium
لاگت
$0.024
وقت
17.4s
ٹوکنز
2,525 tok

#195 Mercury 2.5

high
لاگت
$0.001
وقت
3.5s
ٹوکنز
2,447 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Claude Sonnet 5.5 3.4 9.7 0.0% 0 6.07s 10,608 6,767 0
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں