نیویگیشن
Advertise here

Mercury 2.5 vs Qwen3.5-9B (medium)

Mercury 2.5 average score میں آگے ہے: 4.1 vs 4.0. Mercury 2.5 کی benchmark لاگت کم ہے: $0.026 vs $0.106. Mercury 2.5 تیز ہے: 5.10s vs 110.18s، pass rates 24.6% vs 26.1%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-19

موازنہ کیے گئے ماڈلز

درجہ
#397
کل آؤٹ پٹ ٹوکنز
89,958
ردِعمل کا وقت (اوسط)
5.10s
کل لاگت
$0.026
درجہ
#399
کل آؤٹ پٹ ٹوکنز
447,247
ردِعمل کا وقت (اوسط)
110.18s
کل لاگت
$0.106
تجویز کردہ ماڈل Mercury 2.5

It has the best score here (4.1), while costing about 4.1x less than Qwen3.5-9B (medium).

تفصیلی موازنہ

میٹرک Mercury 2.5 Mercury 2.5 none اجرا: 2026-09-08 Qwen3.5-9B Qwen3.5-9B medium اجرا: 2026-03-02
اسکور 4.1 4.0
درجہ #397 #399
اعتماد پذیری 10.0 8.7
تسلسل 7.6 7.9
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 24.6% 26.1%
غیر مستحکم ٹیسٹ 7 6
کل رنز 69 69
فی نتیجہ لاگت 1.298 3.523
کل لاگت $0.026 $0.106
ان پٹ قیمت $0.040 / 1M $0.100 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $0.150 / 1M
کیش پڑھنے کی قیمت $0.004 / 1M دستیاب نہیں
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 311,488 387,323
آؤٹ پٹ ٹوکنز 89,958 48,562
ریزننگ ٹوکنز 0 410,431
ردِعمل کا وقت (اوسط) 5.10s 110.18s
ردِعمل کا وقت (زیادہ سے زیادہ) 63.41s 569.97s
ردِعمل کا وقت (کل) 117.24s 1873.00s
پیرامیٹرز ~100B 9B
دستیابی بند ماخذ کھلا ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#397 Mercury 2.5

none
لاگت
$0.001
وقت
2.7s
ٹوکنز
2,749 tok

#399 Qwen3.5-9B

medium
لاگت
$0.001
وقت
35.9s
ٹوکنز
3,030 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
Qwen3.5-9B 2.9 10.0 0.0% 0 100.88s 2,396 7,890 41,129

موازنہ کی جوڑی تبدیل کریں