नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 Preview (medium) vs GPT-5.4 Mini (medium)

average score जवळपास समान आहे: 7.5 vs 7.5. Mercury 2.5 Preview (medium) चा benchmark खर्च कमी आहे: $0.024 vs $0.786. Mercury 2.5 Preview (medium) वेगवान आहे: 3.58s vs 26.72s, pass rates 69.7% vs 68.2%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-02

क्रमांक
#91
एकूण आउटपुट टोकन्स
127,034
प्रतिसाद वेळ (सरासरी)
3.58s
एकूण खर्च
$0.024
क्रमांक
#92
एकूण आउटपुट टोकन्स
158,344
प्रतिसाद वेळ (सरासरी)
26.72s
एकूण खर्च
$0.786
शिफारस केलेले मॉडेल Mercury 2.5 Preview (medium)

It has the best score here (7.5), while costing about 33.3x less than GPT-5.4 Mini (medium).

तपशीलवार तुलना

मेट्रिक Mercury 2.5 Preview Mercury 2.5 Preview medium प्रकाशन: 2026-09-02 GPT-5.4 Mini GPT-5.4 Mini medium प्रकाशन: 2026-03-17
स्कोअर 7.5 7.5
क्रमांक #91 #92
विश्वसनीयता 10.0 10.0
सुसंगतता 9.6 8.1
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 69.7% 68.2%
अस्थिर चाचण्या 1 5
एकूण रन 66 66
प्रति निकाल खर्च 0.158 6.546
एकूण खर्च $0.024 $0.786
इनपुट किंमत $0.040 / 1M $0.750 / 1M
आउटपुट किंमत $0.150 / 1M $4.500 / 1M
एकूण इनपुट टोकन्स 112,713 97,164
आउटपुट टोकन्स 5,436 6,211
रिझनिंग टोकन्स 121,598 152,133
प्रतिसाद वेळ (सरासरी) 3.58s 26.72s
प्रतिसाद वेळ (कमाल) 17.84s 138.75s
प्रतिसाद वेळ (एकूण) 78.66s 587.90s
पॅरामीटर्स ~100B ~400B एकूण (~17B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
खर्च
$0.001
वेळ
2.7s
टोकन्स
2,241 tok

#92 GPT-5.4 Mini

medium
खर्च
$0.056
वेळ
95.5s
टोकन्स
12,464 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-5.4 Mini 8.4 7.4 88.9% 1 57.87s 7,305 467 40,902

झटपट तुलना

तुलना जोडी बदला