نیویگیشن
Advertise here

Mercury 2.5 (low) vs Mistral Small 4 (medium)

average score تقریباً برابر ہے: 5.1 vs 5.1. Mercury 2.5 (low) کی benchmark لاگت کم ہے: $0.011 vs $0.097. Mercury 2.5 (low) تیز ہے: 1.35s vs 10.80s، pass rates 39.4% vs 43.9%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-09-08

موازنہ کیے گئے ماڈلز

درجہ
#265
کل آؤٹ پٹ ٹوکنز
33,719
ردِعمل کا وقت (اوسط)
1.35s
کل لاگت
$0.011
درجہ
#262
کل آؤٹ پٹ ٹوکنز
133,597
ردِعمل کا وقت (اوسط)
10.80s
کل لاگت
$0.097
تجویز کردہ ماڈل Mercury 2.5 (low)

It has the best score here (5.1), while costing about 9.1x less than Mistral Small 4 (medium).

تفصیلی موازنہ

میٹرک Mercury 2.5 Mercury 2.5 low اجرا: 2026-09-08 Mistral Small 4 Mistral Small 4 medium اجرا: 2026-03-16
اسکور 5.1 5.1
درجہ #265 #262
اعتماد پذیری 9.8 10.0
تسلسل 8.1 7.0
کوششیں 66/66 66/66
درست ٹیسٹس
فی کوشش کامیابی کی شرح 39.4% 43.9%
غیر مستحکم ٹیسٹ 5 8
کل رنز 66 66
فی نتیجہ لاگت 0.177 1.923
کل لاگت $0.011 $0.097
ان پٹ قیمت $0.040 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $0.600 / 1M
کل ان پٹ ٹوکنز 138,020 140,559
آؤٹ پٹ ٹوکنز 6,083 40,268
ریزننگ ٹوکنز 27,636 93,329
ردِعمل کا وقت (اوسط) 1.35s 10.80s
ردِعمل کا وقت (زیادہ سے زیادہ) 7.48s 59.15s
ردِعمل کا وقت (کل) 29.74s 237.60s
پیرامیٹرز ~100B 119B کل (6B فعال)
دستیابی بند ماخذ کھلا ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#265 Mercury 2.5

low
لاگت
$0.001
وقت
2.4s
ٹوکنز
1,236 tok

#262 Mistral Small 4

medium
لاگت
$0.006
وقت
47.9s
ٹوکنز
9,857 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں