नेव्हिगेशन
AI BENCHY
Advertise here

Mercury 2.5 Preview vs Mistral Small 4 (medium)

Mistral Small 4 (medium) average score मध्ये पुढे आहे: 5.1 vs 4.9. Mercury 2.5 Preview चा benchmark खर्च कमी आहे: $0.018 vs $0.097. Mercury 2.5 Preview वेगवान आहे: 3.51s vs 10.80s, pass rates 30.3% vs 43.9%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-02

क्रमांक
#259
एकूण आउटपुट टोकन्स
82,585
प्रतिसाद वेळ (सरासरी)
3.51s
एकूण खर्च
$0.018
क्रमांक
#246
एकूण आउटपुट टोकन्स
133,597
प्रतिसाद वेळ (सरासरी)
10.80s
एकूण खर्च
$0.097
शिफारस केलेले मॉडेल Mercury 2.5 Preview

Its score stays close to the best score here (4.9 vs 5.1), while costing about 5.5x less than Mistral Small 4 (medium).

तपशीलवार तुलना

मेट्रिक Mercury 2.5 Preview Mercury 2.5 Preview none प्रकाशन: 2026-09-02 Mistral Small 4 Mistral Small 4 medium प्रकाशन: 2026-03-16
स्कोअर 4.9 5.1
क्रमांक #259 #246
विश्वसनीयता 10.0 10.0
सुसंगतता 8.3 7.0
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 30.3% 43.9%
अस्थिर चाचण्या 5 8
एकूण रन 66 66
प्रति निकाल खर्च 0.440 1.923
एकूण खर्च $0.018 $0.097
इनपुट किंमत $0.040 / 1M $0.150 / 1M
आउटपुट किंमत $0.150 / 1M $0.600 / 1M
एकूण इनपुट टोकन्स 130,296 140,559
आउटपुट टोकन्स 82,585 40,268
रिझनिंग टोकन्स 0 93,329
प्रतिसाद वेळ (सरासरी) 3.51s 10.80s
प्रतिसाद वेळ (कमाल) 60.70s 59.15s
प्रतिसाद वेळ (एकूण) 77.28s 237.60s
पॅरामीटर्स ~100B 119B एकूण (6B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
अवैध SVG
खर्च
$0.001
वेळ
3.3s
टोकन्स
3,122 tok

#246 Mistral Small 4

medium
खर्च
$0.006
वेळ
47.9s
टोकन्स
9,857 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

झटपट तुलना

तुलना जोडी बदला