نیویگیشن
Advertise here

Mercury 2.5 Preview (medium) vs GPT-6 Sol

average score تقریباً برابر ہے: 6.8 vs 6.8. Mercury 2.5 Preview (medium) کی benchmark لاگت کم ہے: $0.037 vs $0.551. Mercury 2.5 Preview (medium) تیز ہے: 6.66s vs 9.02s، pass rates 66.7% vs 63.8%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-01

موازنہ کیے گئے ماڈلز

درجہ
#171
کل آؤٹ پٹ ٹوکنز
150,107
ردِعمل کا وقت (اوسط)
6.66s
کل لاگت
$0.037
درجہ
#172
کل آؤٹ پٹ ٹوکنز
7,989
ردِعمل کا وقت (اوسط)
9.02s
کل لاگت
$0.551
تجویز کردہ ماڈل Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 15.0x less than GPT-6 Sol.

تفصیلی موازنہ

میٹرک Mercury 2.5 Preview Mercury 2.5 Preview medium اجرا: 2026-09-02 GPT-6 Sol GPT-6 Sol none اجرا: 2026-09-23
اسکور 6.8 6.8
درجہ #171 #172
اعتماد پذیری 10.0 10.0
تسلسل 9.6 8.5
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 66.7% 63.8%
غیر مستحکم ٹیسٹ 1 4
کل رنز 69 69
فی نتیجہ لاگت 0.244 4.232
کل لاگت $0.037 $0.551
ان پٹ قیمت $0.000 / 1M $2.000 / 1M
آؤٹ پٹ قیمت $0.000 / 1M $10.000 / 1M
کل ان پٹ ٹوکنز 397,291 235,086
آؤٹ پٹ ٹوکنز 6,355 7,989
ریزننگ ٹوکنز 143,752 0
ردِعمل کا وقت (اوسط) 6.66s 9.02s
ردِعمل کا وقت (زیادہ سے زیادہ) 74.63s 57.02s
ردِعمل کا وقت (کل) 153.29s 207.45s
پیرامیٹرز ~100B ~2T کل (~150B فعال)
دستیابی بند ماخذ بند ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#171 Mercury 2.5 Preview

medium
لاگت
$0.001
وقت
2.7s
ٹوکنز
2,241 tok

#172 GPT-6 Sol

none
لاگت
$0.030
وقت
31.9s
ٹوکنز
3,055 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-6 Sol 5.5 10.0 33.3% 0 12.23s 7,302 389 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں