नेविगेशन
Advertise here

Mercury 2.5 vs Nemotron 3.5 Lightning

average score लगभग बराबर है: 3.9 vs 4.0. Nemotron 3.5 Lightning की benchmark लागत कम है: $0.007 vs $0.016. Nemotron 3.5 Lightning तेज है: 1.21s vs 2.45s, pass rates 25.8% vs 16.7%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-09-08

तुलना किए गए मॉडल

रैंक
#312
कुल आउटपुट टोकन
71,143
प्रतिक्रिया समय (औसत)
2.45s
कुल लागत
$0.016
रैंक
#310
कुल आउटपुट टोकन
2,731
प्रतिक्रिया समय (औसत)
1.21s
कुल लागत
$0.007
अनुशंसित मॉडल Nemotron 3.5 Lightning

It has the best score here (4.0), while costing about 2.4x less than Mercury 2.5.

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 none रिलीज़: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning none रिलीज़: 2026-08-11 निःशुल्क उपलब्ध
स्कोर 3.9 4.0
रैंक #312 #310
विश्वसनीयता 10.0 10.0
संगति 7.5 9.2
प्रयास 66/66 66/66
सही परीक्षण
प्रति प्रयास पास दर 25.8% 16.7%
अस्थिर टेस्ट 7 2
कुल रन 66 66
प्रति परिणाम लागत 0.782 0.000
कुल लागत $0.016 $0.007
इनपुट कीमत $0.040 / 1M $0.080 / 1M
आउटपुट कीमत $0.150 / 1M $0.200 / 1M
कुल इनपुट टोकन 123,740 74,074
आउटपुट टोकन 71,143 2,731
रीजनिंग टोकन 0 0
प्रतिक्रिया समय (औसत) 2.45s 1.21s
प्रतिक्रिया समय (अधिकतम) 36.48s 6.30s
प्रतिक्रिया समय (कुल) 53.83s 26.62s
पैरामीटर ~100B 30B कुल (3B सक्रिय)
उपलब्धता बंद स्रोत वेट उपलब्ध

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#312 Mercury 2.5

none
लागत
$0.001
समय
2.7s
टोकन
2,749 tok

#310 Nemotron 3.5 Lightning

none
लागत
$0.000
समय
101.6s
टोकन
6,775 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
Nemotron 3.5 Lightning 3.1 7.2 11.1% 1 1.55s 7,623 589 0

त्वरित तुलना

तुलना जोड़ी बदलें