نیویگیشن
AI BENCHY
Advertise here

Mercury 2.5 Preview vs Mistral Small 4 (medium)

Mistral Small 4 (medium) average score میں آگے ہے: 5.1 vs 4.9. Mercury 2.5 Preview کی benchmark لاگت کم ہے: $0.018 vs $0.097. Mercury 2.5 Preview تیز ہے: 3.51s vs 10.80s، pass rates 30.3% vs 43.9%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-09-02

درجہ
#259
کل آؤٹ پٹ ٹوکنز
82,585
ردِعمل کا وقت (اوسط)
3.51s
کل لاگت
$0.018
درجہ
#246
کل آؤٹ پٹ ٹوکنز
133,597
ردِعمل کا وقت (اوسط)
10.80s
کل لاگت
$0.097
تجویز کردہ ماڈل Mercury 2.5 Preview

Its score stays close to the best score here (4.9 vs 5.1), while costing about 5.5x less than Mistral Small 4 (medium).

تفصیلی موازنہ

میٹرک Mercury 2.5 Preview Mercury 2.5 Preview none اجرا: 2026-09-02 Mistral Small 4 Mistral Small 4 medium اجرا: 2026-03-16
اسکور 4.9 5.1
درجہ #259 #246
اعتماد پذیری 10.0 10.0
تسلسل 8.3 7.0
کوششیں 66/66 66/66
درست ٹیسٹس
فی کوشش کامیابی کی شرح 30.3% 43.9%
غیر مستحکم ٹیسٹ 5 8
کل رنز 66 66
فی نتیجہ لاگت 0.440 1.923
کل لاگت $0.018 $0.097
ان پٹ قیمت $0.040 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $0.600 / 1M
کل ان پٹ ٹوکنز 130,296 140,559
آؤٹ پٹ ٹوکنز 82,585 40,268
ریزننگ ٹوکنز 0 93,329
ردِعمل کا وقت (اوسط) 3.51s 10.80s
ردِعمل کا وقت (زیادہ سے زیادہ) 60.70s 59.15s
ردِعمل کا وقت (کل) 77.28s 237.60s
پیرامیٹرز ~100B 119B کل (6B فعال)
دستیابی بند ماخذ کھلا ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
غلط SVG
لاگت
$0.001
وقت
3.3s
ٹوکنز
3,122 tok

#246 Mistral Small 4

medium
لاگت
$0.006
وقت
47.9s
ٹوکنز
9,857 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں