نیویگیشن
Advertise here

Mercury 2 vs KAT Coder AIR V2.5 (default)

KAT Coder AIR V2.5 (default) average score میں آگے ہے: 4.4 vs 4.4. Mercury 2 کی benchmark لاگت کم ہے: $0.033 vs $0.070. Mercury 2 تیز ہے: 1.18s vs 11.96s، pass rates 23.2% vs 34.8%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-12

موازنہ کیے گئے ماڈلز

درجہ
#360
کل آؤٹ پٹ ٹوکنز
9,709
ردِعمل کا وقت (اوسط)
1.18s
کل لاگت
$0.033
درجہ
#356
کل آؤٹ پٹ ٹوکنز
97,752
ردِعمل کا وقت (اوسط)
11.96s
کل لاگت
$0.070
تجویز کردہ ماڈل Mercury 2

Its score stays close to the best score here (4.4 vs 4.4), while costing about 2.1x less than KAT Coder AIR V2.5 (default).

تفصیلی موازنہ

میٹرک Mercury 2 Mercury 2 none اجرا: 2026-02-24 KAT Coder AIR V2.5 KAT Coder AIR V2.5 default اجرا: 2026-07-14
اسکور 4.4 4.4
درجہ #360 #356
اعتماد پذیری 10.0 10.0
تسلسل 9.2 7.4
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 23.2% 34.8%
غیر مستحکم ٹیسٹ 2 7
کل رنز 69 69
فی نتیجہ لاگت 0.812 1.382
کل لاگت $0.033 $0.070
ان پٹ قیمت $0.250 / 1M $0.150 / 1M
آؤٹ پٹ قیمت $0.750 / 1M $0.600 / 1M
کیش پڑھنے کی قیمت $0.025 / 1M دستیاب نہیں
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 100,634 69,376
آؤٹ پٹ ٹوکنز 9,609 7,792
ریزننگ ٹوکنز 100 89,960
ردِعمل کا وقت (اوسط) 1.18s 11.96s
ردِعمل کا وقت (زیادہ سے زیادہ) 9.00s 121.05s
ردِعمل کا وقت (کل) 27.14s 275.18s
پیرامیٹرز ~100B ~35B کل (~3B فعال)
دستیابی بند ماخذ بند ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#360 Mercury 2

none
لاگت
$0.002
وقت
1.8s
ٹوکنز
1,514 tok

#356 KAT Coder AIR V2.5

default
لاگت
$0.002
وقت
14.5s
ٹوکنز
2,619 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886

موازنہ کی جوڑی تبدیل کریں