नेविगेशन
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) average score में आगे है: 7.2 vs 6.5. Mercury 2.5 (high) की benchmark लागत कम है: $0.044 vs $0.449. Mercury 2.5 (high) तेज है: 7.62s vs 20.72s, pass rates 59.4% vs 63.8%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-24

तुलना किए गए मॉडल

रैंक
#234
कुल आउटपुट टोकन
193,676
प्रतिक्रिया समय (औसत)
7.62s
कुल लागत
$0.044
रैंक
#179
कुल आउटपुट टोकन
339,108
प्रतिक्रिया समय (औसत)
20.72s
कुल लागत
$0.449
अनुशंसित मॉडल Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 7.2), while costing about 10.3x less than Step 3.7 Flash (low).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 high रिलीज़: 2026-09-08 Step 3.7 Flash Step 3.7 Flash low रिलीज़: 2026-05-29
स्कोर 6.5 7.2
रैंक #234 #179
विश्वसनीयता 9.8 10.0
संगति 8.7 7.9
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 59.4% 63.8%
अस्थिर टेस्ट 4 6
कुल रन 69 69
प्रति परिणाम लागत 0.362 4.078
कुल लागत $0.044 $0.449
इनपुट कीमत $0.040 / 1M $0.200 / 1M
आउटपुट कीमत $0.150 / 1M $1.150 / 1M
कैश पढ़ने की कीमत $0.004 / 1M $0.040 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 358,562 292,685
आउटपुट टोकन 4,266 339,108
रीजनिंग टोकन 189,410 0
प्रतिक्रिया समय (औसत) 7.62s 20.72s
प्रतिक्रिया समय (अधिकतम) 80.30s 124.75s
प्रतिक्रिया समय (कुल) 175.36s 476.67s
पैरामीटर ~100B 198B कुल (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#234 Mercury 2.5

high
लागत
$0.001
समय
3.5s
टोकन
2,447 tok

#179 Step 3.7 Flash

low
अमान्य SVG
लागत
$0.004
समय
25.3s
टोकन
3,072 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

तुलना जोड़ी बदलें