نیویگیشن
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

ERNIE-Light-DT-1.0 (low) vs Mercury 2.5 (medium)

average score تقریباً برابر ہے: 6.4 vs 6.4. Mercury 2.5 (medium) کی benchmark لاگت کم ہے: $0.034 vs $0.489. Mercury 2.5 (medium) تیز ہے: 7.74s vs 8.91s، pass rates 65.2% vs 63.8%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-11-13

موازنہ کیے گئے ماڈلز

درجہ
#288
کل آؤٹ پٹ ٹوکنز
43,895
ردِعمل کا وقت (اوسط)
8.91s
کل لاگت
$0.489
درجہ
#286
کل آؤٹ پٹ ٹوکنز
138,946
ردِعمل کا وقت (اوسط)
7.74s
کل لاگت
$0.034
تجویز کردہ ماڈل Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 14.6x less than ERNIE-Light-DT-1.0 (low).

تفصیلی موازنہ

میٹرک ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low اجرا: 2026-11-12 Mercury 2.5 Mercury 2.5 medium اجرا: 2026-09-08
اسکور 6.4 6.4
درجہ #288 #286
اعتماد پذیری 9.3 9.7
تسلسل 7.0 8.3
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 65.2% 63.8%
غیر مستحکم ٹیسٹ 9 5
کل رنز 69 69
فی نتیجہ لاگت 4.441 0.280
کل لاگت $0.489 $0.034
ان پٹ قیمت $1.130 / 1M $0.040 / 1M
آؤٹ پٹ قیمت $3.941 / 1M $0.150 / 1M
کیش پڑھنے کی قیمت $0.113 / 1M $0.004 / 1M
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 279,234 317,982
آؤٹ پٹ ٹوکنز 13,328 3,918
ریزننگ ٹوکنز 30,567 135,028
ردِعمل کا وقت (اوسط) 8.91s 7.74s
ردِعمل کا وقت (زیادہ سے زیادہ) 96.92s 107.89s
ردِعمل کا وقت (کل) 204.98s 178.07s
پیرامیٹرز ~320B کل (~18B فعال) ~100B
دستیابی بند ماخذ بند ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
لاگت
$0.005
وقت
7.7s
ٹوکنز
1,177 tok

#286 Mercury 2.5

medium
لاگت
$0.001
وقت
3.8s
ٹوکنز
3,386 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

موازنہ کی جوڑی تبدیل کریں