نیویگیشن
Advertise here

Mercury 2.5 (high) vs KAT-Coder-Pro V2.5 (low)

KAT-Coder-Pro V2.5 (low) average score میں آگے ہے: 6.5 vs 6.5. Mercury 2.5 (high) کی benchmark لاگت کم ہے: $0.044 vs $0.568. Mercury 2.5 (high) تیز ہے: 7.62s vs 19.40s، pass rates 59.4% vs 65.2%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-11-16

موازنہ کیے گئے ماڈلز

درجہ
#276
کل آؤٹ پٹ ٹوکنز
193,676
ردِعمل کا وقت (اوسط)
7.62s
کل لاگت
$0.044
درجہ
#271
کل آؤٹ پٹ ٹوکنز
113,193
ردِعمل کا وقت (اوسط)
19.40s
کل لاگت
$0.568
تجویز کردہ ماڈل Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 6.5), while costing about 13.1x less than KAT-Coder-Pro V2.5 (low).

تفصیلی موازنہ

میٹرک Mercury 2.5 Mercury 2.5 high اجرا: 2026-09-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low اجرا: 2026-07-14
اسکور 6.5 6.5
درجہ #276 #271
اعتماد پذیری 9.8 10.0
تسلسل 8.7 7.1
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 59.4% 65.2%
غیر مستحکم ٹیسٹ 4 8
کل رنز 69 69
فی نتیجہ لاگت 0.362 3.636
کل لاگت $0.044 $0.568
ان پٹ قیمت $0.040 / 1M $0.740 / 1M
آؤٹ پٹ قیمت $0.150 / 1M $2.960 / 1M
کیش پڑھنے کی قیمت $0.004 / 1M $0.150 / 1M
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 358,562 87,682
آؤٹ پٹ ٹوکنز 4,266 7,166
ریزننگ ٹوکنز 189,410 106,027
ردِعمل کا وقت (اوسط) 7.62s 19.40s
ردِعمل کا وقت (زیادہ سے زیادہ) 80.30s 209.15s
ردِعمل کا وقت (کل) 175.36s 446.11s
پیرامیٹرز ~100B ~700B کل (~72B فعال)
دستیابی بند ماخذ بند ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#276 Mercury 2.5

high
لاگت
$0.001
وقت
3.5s
ٹوکنز
2,447 tok

#271 KAT-Coder-Pro V2.5

low
لاگت
$0.016
وقت
47.6s
ٹوکنز
5,182 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

موازنہ کی جوڑی تبدیل کریں