نیویگیشن
AI BENCHY
Advertise here

Mercury 2.5 Preview (low) vs Mistral Small 4 (medium)

Mistral Small 4 (medium) average score میں آگے ہے: 5.1 vs 5.0. Mercury 2.5 Preview (low) کی benchmark لاگت کم ہے: $0.011 vs $0.097. Mercury 2.5 Preview (low) تیز ہے: 1.31s vs 10.80s، pass rates 47.0% vs 43.9%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-09-02

درجہ
#254
کل آؤٹ پٹ ٹوکنز
31,975
ردِعمل کا وقت (اوسط)
1.31s
کل لاگت
$0.011
درجہ
#246
کل آؤٹ پٹ ٹوکنز
133,597
ردِعمل کا وقت (اوسط)
10.80s
کل لاگت
$0.097
تجویز کردہ ماڈل Mercury 2.5 Preview (low)

Its score stays close to the best score here (5.0 vs 5.1), while costing about 9.5x less than Mistral Small 4 (medium).

تفصیلی موازنہ

میٹرک Mercury 2.5 Preview Mercury 2.5 Preview low اجرا: 2026-09-02 Mistral Small 4 Mistral Small 4 medium اجرا: 2026-03-16
اسکور 5.0 5.1
درجہ #254 #246
اعتماد پذیری 10.0 10.0
تسلسل 7.0 7.0
کوششیں 66/66 66/66
درست ٹیسٹس
فی کوشش کامیابی کی شرح 47.0% 43.9%
غیر مستحکم ٹیسٹ 8 8
کل رنز 66 66
فی نتیجہ لاگت 0.169 1.923
کل لاگت $0.011 $0.097
ان پٹ قیمت $0.040 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $0.600 / 1M
کل ان پٹ ٹوکنز 133,525 140,559
آؤٹ پٹ ٹوکنز 7,259 40,268
ریزننگ ٹوکنز 24,716 93,329
ردِعمل کا وقت (اوسط) 1.31s 10.80s
ردِعمل کا وقت (زیادہ سے زیادہ) 7.29s 59.15s
ردِعمل کا وقت (کل) 28.77s 237.60s
پیرامیٹرز ~100B 119B کل (6B فعال)
دستیابی بند ماخذ کھلا ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Mercury 2.5 Preview

low
لاگت
$0.001
وقت
1.5s
ٹوکنز
1,169 tok

#246 Mistral Small 4

medium
لاگت
$0.006
وقت
47.9s
ٹوکنز
9,857 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 Preview 5.5 10.0 33.3% 0 972ms 7,794 695 2,263
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں