नेविगेशन
AI BENCHY
Advertise here

Mercury 2 (medium) vs GPT-5.5

average score लगभग बराबर है: 7.0 vs 7.0. Mercury 2 (medium) की benchmark लागत कम है: $0.094 vs $0.544. GPT-5.5 तेज है: 2.35s vs 2.95s, pass rates 53.0% vs 59.1%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-09-04

रैंक
#136
कुल आउटपुट टोकन
87,554
प्रतिक्रिया समय (औसत)
2.95s
कुल लागत
$0.094
रैंक
#135
कुल आउटपुट टोकन
4,915
प्रतिक्रिया समय (औसत)
2.35s
कुल लागत
$0.544
अनुशंसित मॉडल Mercury 2 (medium)

It has the best score here (7.0), while costing about 5.8x less than GPT-5.5.

विस्तृत तुलना

मेट्रिक Mercury 2 Mercury 2 medium रिलीज़: 2026-02-24 GPT-5.5 GPT-5.5 none रिलीज़: 2026-04-24
स्कोर 7.0 7.0
रैंक #136 #135
विश्वसनीयता 10.0 10.0
संगति 8.4 9.2
प्रयास 66/66 66/66
सही परीक्षण
प्रति प्रयास पास दर 53.0% 59.1%
अस्थिर टेस्ट 4 2
कुल रन 66 66
प्रति परिणाम लागत 0.933 4.533
कुल लागत $0.094 $0.544
इनपुट कीमत $0.250 / 1M $5.000 / 1M
आउटपुट कीमत $0.750 / 1M $30.000 / 1M
कुल इनपुट टोकन 110,515 79,294
आउटपुट टोकन 10,325 4,915
रीजनिंग टोकन 77,229 0
प्रतिक्रिया समय (औसत) 2.95s 2.35s
प्रतिक्रिया समय (अधिकतम) 14.63s 12.24s
प्रतिक्रिया समय (कुल) 61.89s 51.78s
पैरामीटर ~100B ~1.5T कुल (~100B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#136 Mercury 2

medium
लागत
$0.002
समय
2.1s
टोकन
1,702 tok

#135 GPT-5.5

none
लागत
$0.090
समय
54.3s
टोकन
3,063 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
GPT-5.5 5.5 10.0 33.3% 0 1.35s 7,305 462 0

त्वरित तुलना

तुलना जोड़ी बदलें