नेविगेशन
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) average score में आगे है: 7.1 vs 7.1. Mercury 2.5 (high) की benchmark लागत कम है: $0.031 vs $0.390. Mercury 2.5 (high) तेज है: 4.32s vs 17.87s, pass rates 62.1% vs 63.6%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-09-08

तुलना किए गए मॉडल

रैंक
#134
कुल आउटपुट टोकन
174,547
प्रतिक्रिया समय (औसत)
4.32s
कुल लागत
$0.031
रैंक
#132
कुल आउटपुट टोकन
320,393
प्रतिक्रिया समय (औसत)
17.87s
कुल लागत
$0.390
अनुशंसित मॉडल Mercury 2.5 (high)

Its score stays close to the best score here (7.1 vs 7.1), while costing about 12.6x less than Step 3.7 Flash (low).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 high रिलीज़: 2026-09-08 Step 3.7 Flash Step 3.7 Flash low रिलीज़: 2026-05-29
स्कोर 7.1 7.1
रैंक #134 #132
विश्वसनीयता 9.7 10.0
संगति 8.6 8.1
प्रयास 66/66 66/66
सही परीक्षण
प्रति प्रयास पास दर 62.1% 63.6%
अस्थिर टेस्ट 4 5
कुल रन 66 66
प्रति परिणाम लागत 0.259 3.539
कुल लागत $0.031 $0.390
इनपुट कीमत $0.040 / 1M $0.200 / 1M
आउटपुट कीमत $0.150 / 1M $1.150 / 1M
कुल इनपुट टोकन 120,068 103,842
आउटपुट टोकन 3,402 320,393
रीजनिंग टोकन 171,145 0
प्रतिक्रिया समय (औसत) 4.32s 17.87s
प्रतिक्रिया समय (अधिकतम) 23.63s 124.75s
प्रतिक्रिया समय (कुल) 95.06s 393.04s
पैरामीटर ~100B 198B कुल (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#134 Mercury 2.5

high
लागत
$0.001
समय
3.5s
टोकन
2,447 tok

#132 Step 3.7 Flash

low
अमान्य SVG
लागत
$0.004
समय
25.3s
टोकन
3,072 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

त्वरित तुलना

तुलना जोड़ी बदलें