نیویگیشن
Advertise here

Granite 4.2 8B (high) vs Mercury 2.5 Preview (default)

average score تقریباً برابر ہے: 4.7 vs 4.7. Mercury 2.5 Preview (default) کی benchmark لاگت کم ہے: $0.023 vs $0.111. Mercury 2.5 Preview (default) تیز ہے: 7.05s vs 235.35s، pass rates 37.7% vs 29.0%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-11-16

موازنہ کیے گئے ماڈلز

درجہ
#423
کل آؤٹ پٹ ٹوکنز
576,052
ردِعمل کا وقت (اوسط)
235.35s
کل لاگت
$0.111
درجہ
#419
کل آؤٹ پٹ ٹوکنز
86,367
ردِعمل کا وقت (اوسط)
7.05s
کل لاگت
$0.023
تجویز کردہ ماڈل Mercury 2.5 Preview (default)

It has the best score here (4.7), while costing about 4.8x less than Granite 4.2 8B (high).

تفصیلی موازنہ

میٹرک Granite 4.2 8B Granite 4.2 8B high اجرا: 2026-09-02 Mercury 2.5 Preview Mercury 2.5 Preview default اجرا: 2026-09-02
اسکور 4.7 4.7
درجہ #423 #419
اعتماد پذیری 8.2 9.9
تسلسل 6.4 8.3
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 37.7% 29.0%
غیر مستحکم ٹیسٹ 10 5
کل رنز 69 69
فی نتیجہ لاگت 2.751 0.559
کل لاگت $0.111 $0.023
ان پٹ قیمت $0.060 / 1M $0.040 / 1M
آؤٹ پٹ قیمت $0.250 / 1M $0.150 / 1M
کیش پڑھنے کی قیمت $0.015 / 1M دستیاب نہیں
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 282,658 250,541
آؤٹ پٹ ٹوکنز 198,563 86,367
ریزننگ ٹوکنز 462,804 0
ردِعمل کا وقت (اوسط) 235.35s 7.05s
ردِعمل کا وقت (زیادہ سے زیادہ) 685.87s 84.96s
ردِعمل کا وقت (کل) 5413.09s 162.25s
پیرامیٹرز 8B ~100B
دستیابی کھلا ماخذ بند ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#423 IBM: Granite 4.2 8B

high
Provider returned error
لاگت
$0.000
وقت
0.2s
ٹوکنز
0 tok

#419 Mercury 2.5 Preview

default
غلط SVG
لاگت
$0.001
وقت
3.3s
ٹوکنز
3,122 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Granite 4.2 8B 3.8 4.3 33.3% 2 515.34s 7,047 42,438 154,749
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0

موازنہ کی جوڑی تبدیل کریں