نیویگیشن
Advertise here

Claude Sonnet 5.5 (low) vs Mercury 2.5 Preview (medium)

average score تقریباً برابر ہے: 6.9 vs 6.8. Mercury 2.5 Preview (medium) کی benchmark لاگت کم ہے: $0.037 vs $0.909. Mercury 2.5 Preview (medium) تیز ہے: 6.66s vs 7.46s، pass rates 46.4% vs 66.7%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-01

موازنہ کیے گئے ماڈلز

درجہ
#166
کل آؤٹ پٹ ٹوکنز
32,443
ردِعمل کا وقت (اوسط)
7.46s
کل لاگت
$0.909
درجہ
#171
کل آؤٹ پٹ ٹوکنز
150,107
ردِعمل کا وقت (اوسط)
6.66s
کل لاگت
$0.037
تجویز کردہ ماڈل Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 24.8x less than Claude Sonnet 5.5 (low).

تفصیلی موازنہ

میٹرک Claude Sonnet 5.5 Claude Sonnet 5.5 low اجرا: 2026-09-29 Mercury 2.5 Preview Mercury 2.5 Preview medium اجرا: 2026-09-02
اسکور 6.9 6.8
درجہ #166 #171
اعتماد پذیری 10.0 10.0
تسلسل 9.4 9.6
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 46.4% 66.7%
غیر مستحکم ٹیسٹ 2 1
کل رنز 69 69
فی نتیجہ لاگت 9.082 0.244
کل لاگت $0.909 $0.037
ان پٹ قیمت $2.000 / 1M $0.000 / 1M
آؤٹ پٹ قیمت $10.000 / 1M $0.000 / 1M
کل ان پٹ ٹوکنز 291,853 397,291
آؤٹ پٹ ٹوکنز 24,116 6,355
ریزننگ ٹوکنز 8,327 143,752
ردِعمل کا وقت (اوسط) 7.46s 6.66s
ردِعمل کا وقت (زیادہ سے زیادہ) 46.61s 74.63s
ردِعمل کا وقت (کل) 171.47s 153.29s
پیرامیٹرز ~1T کل (~100B فعال) ~100B
دستیابی بند ماخذ بند ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#166 Claude Sonnet 5.5

low
لاگت
$0.020
وقت
15.3s
ٹوکنز
2,077 tok

#171 Mercury 2.5 Preview

medium
لاگت
$0.001
وقت
2.7s
ٹوکنز
2,241 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Claude Sonnet 5.5 3.2 9.7 0.0% 0 5.81s 10,608 5,903 0
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں