नेव्हिगेशन
Advertise here

Granite 4.2 8B (low) vs Mercury 2.5 (low)

average score जवळपास समान आहे: 5.1 vs 5.1. Mercury 2.5 (low) चा benchmark खर्च कमी आहे: $0.011 vs $0.012. Mercury 2.5 (low) वेगवान आहे: 1.35s vs 54.36s, pass rates 31.8% vs 39.4%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-08

तुलना केलेली मॉडेल्स

क्रमांक
#263
एकूण आउटपुट टोकन्स
27,928
प्रतिसाद वेळ (सरासरी)
54.36s
एकूण खर्च
$0.012
क्रमांक
#265
एकूण आउटपुट टोकन्स
33,719
प्रतिसाद वेळ (सरासरी)
1.35s
एकूण खर्च
$0.011
शिफारस केलेले मॉडेल Mercury 2.5 (low)

It has the best score here (5.1), while responding about 40.2x faster than Granite 4.2 8B (low).

तपशीलवार तुलना

मेट्रिक Granite 4.2 8B Granite 4.2 8B low प्रकाशन: 2026-09-02 Mercury 2.5 Mercury 2.5 low प्रकाशन: 2026-09-08
स्कोअर 5.1 5.1
क्रमांक #263 #265
विश्वसनीयता 9.0 9.8
सुसंगतता 10.0 8.1
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 31.8% 39.4%
अस्थिर चाचण्या 0 5
एकूण रन 66 66
प्रति निकाल खर्च 0.167 0.177
एकूण खर्च $0.012 $0.011
इनपुट किंमत $0.100 / 1M $0.040 / 1M
आउटपुट किंमत $0.150 / 1M $0.150 / 1M
एकूण इनपुट टोकन्स 74,721 138,020
आउटपुट टोकन्स 9,205 6,083
रिझनिंग टोकन्स 18,723 27,636
प्रतिसाद वेळ (सरासरी) 54.36s 1.35s
प्रतिसाद वेळ (कमाल) 566.80s 7.48s
प्रतिसाद वेळ (एकूण) 1195.97s 29.74s
पॅरामीटर्स 8B ~100B
उपलब्धता मुक्त स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#263 IBM: Granite 4.2 8B

low
Provider returned error
खर्च
$0.000
वेळ
0.2s
टोकन्स
0 tok

#265 Mercury 2.5

low
खर्च
$0.001
वेळ
2.4s
टोकन्स
1,236 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Granite 4.2 8B 5.5 10.0 33.3% 0 13.01s 8,439 2,469 2,984
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269

झटपट तुलना

तुलना जोडी बदला