नेव्हिगेशन
AI BENCHY
Advertise here

Granite 4.1 8B vs Mercury 2

Mercury 2 average score मध्ये पुढे आहे: 4.6 vs 4.0. Granite 4.1 8B चा benchmark खर्च कमी आहे: $0.007 vs $0.030. Mercury 2 वेगवान आहे: 829ms vs 1.45s, pass rates 9.1% vs 22.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-28

क्रमांक
#224
एकूण आउटपुट टोकन्स
5,996
प्रतिसाद वेळ (सरासरी)
1.45s
एकूण खर्च
$0.007
क्रमांक
#211
एकूण आउटपुट टोकन्स
9,564
प्रतिसाद वेळ (सरासरी)
829ms
एकूण खर्च
$0.030
शिफारस केलेले मॉडेल Mercury 2

It has the best score here (4.6), while responding about 1.8x faster than Granite 4.1 8B.

तपशीलवार तुलना

मेट्रिक Granite 4.1 8B Granite 4.1 8B none प्रकाशन: 2026-05-01 Mercury 2 Mercury 2 none प्रकाशन: 2026-02-24
स्कोअर 4.0 4.6
क्रमांक #224 #211
विश्वसनीयता 10.0 10.0
सुसंगतता 10.0 9.2
बरोबर चाचण्या
प्रति प्रयत्न पास दर 9.1% 22.7%
अस्थिर चाचण्या 0 2
एकूण रन 66 66
प्रति निकाल खर्च 0.315 0.734
एकूण खर्च $0.007 $0.030
इनपुट किंमत $0.050 / 1M $0.250 / 1M
आउटपुट किंमत $0.100 / 1M $0.750 / 1M
एकूण इनपुट टोकन्स 113,827 88,704
आउटपुट टोकन्स 5,996 9,564
रिझनिंग टोकन्स 0 0
प्रतिसाद वेळ (सरासरी) 1.45s 829ms
प्रतिसाद वेळ (कमाल) 16.67s 4.52s
प्रतिसाद वेळ (एकूण) 31.96s 18.24s

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#224 IBM: Granite 4.1 8B

none
खर्च
$0.001
वेळ
3.2s
टोकन्स
491 tok

#211 Mercury 2

none
खर्च
$0.002
वेळ
1.8s
टोकन्स
1,514 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0

झटपट तुलना

तुलना जोडी बदला