نیویگیشن
AI BENCHY
Advertise here

Mercury 2.5 Preview (medium) vs Qwen3.8 2.4T A95B (high)

Mercury 2.5 Preview (medium) average score میں آگے ہے: 7.5 vs 7.4. Mercury 2.5 Preview (medium) کی benchmark لاگت کم ہے: $0.024 vs $2.357. Mercury 2.5 Preview (medium) تیز ہے: 3.58s vs 120.59s، pass rates 69.7% vs 74.2%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-09-02

درجہ
#91
کل آؤٹ پٹ ٹوکنز
127,034
ردِعمل کا وقت (اوسط)
3.58s
کل لاگت
$0.024
درجہ
#99
کل آؤٹ پٹ ٹوکنز
456,028
ردِعمل کا وقت (اوسط)
120.59s
کل لاگت
$2.357
تجویز کردہ ماڈل Mercury 2.5 Preview (medium)

It has the best score here (7.5), while costing about 100.0x less than Qwen3.8 2.4T A95B (high).

تفصیلی موازنہ

میٹرک Mercury 2.5 Preview Mercury 2.5 Preview medium اجرا: 2026-09-02 Qwen3.8 2.4T A95B Qwen3.8 2.4T A95B high اجرا: 2026-08-12
اسکور 7.5 7.4
درجہ #91 #99
اعتماد پذیری 10.0 9.4
تسلسل 9.6 8.3
کوششیں 66/66 66/66
درست ٹیسٹس
فی کوشش کامیابی کی شرح 69.7% 74.2%
غیر مستحکم ٹیسٹ 1 4
کل رنز 66 66
فی نتیجہ لاگت 0.158 16.832
کل لاگت $0.024 $2.357
ان پٹ قیمت $0.040 / 1M $2.000 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $6.000 / 1M
کل ان پٹ ٹوکنز 112,713 108,931
آؤٹ پٹ ٹوکنز 5,436 112,801
ریزننگ ٹوکنز 121,598 343,227
ردِعمل کا وقت (اوسط) 3.58s 120.59s
ردِعمل کا وقت (زیادہ سے زیادہ) 17.84s 532.28s
ردِعمل کا وقت (کل) 78.66s 2653.05s
پیرامیٹرز ~100B 2.4T کل (95B فعال)
دستیابی بند ماخذ وزن دستیاب

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
لاگت
$0.001
وقت
2.7s
ٹوکنز
2,241 tok

#99 Qwen3.8 2.4T A95B

high
غلط SVG
لاگت
$0.000
وقت
600.0s
ٹوکنز
0 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Qwen3.8 2.4T A95B 5.9 6.3 55.6% 1 160.52s 6,399 3,310 48,078

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں