नेविगेशन
Advertise here

Mercury 2.5 (high) vs Step 3.7 Flash (high)

Step 3.7 Flash (high) average score में आगे है: 6.6 vs 6.5. Mercury 2.5 (high) की benchmark लागत कम है: $0.044 vs $1.478. Mercury 2.5 (high) तेज है: 7.62s vs 72.72s, pass rates 59.4% vs 58.0%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-12

तुलना किए गए मॉडल

रैंक
#208
कुल आउटपुट टोकन
193,676
प्रतिक्रिया समय (औसत)
7.62s
कुल लागत
$0.044
रैंक
#203
कुल आउटपुट टोकन
1,100,052
प्रतिक्रिया समय (औसत)
72.72s
कुल लागत
$1.478
अनुशंसित मॉडल Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 6.6), while costing about 34.1x less than Step 3.7 Flash (high).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 high रिलीज़: 2026-09-08 Step 3.7 Flash Step 3.7 Flash high रिलीज़: 2026-05-29
स्कोर 6.5 6.6
रैंक #208 #203
विश्वसनीयता 9.8 10.0
संगति 8.7 8.5
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 59.4% 58.0%
अस्थिर टेस्ट 4 4
कुल रन 69 69
प्रति परिणाम लागत 0.362 12.267
कुल लागत $0.044 $1.478
इनपुट कीमत $0.040 / 1M $0.200 / 1M
आउटपुट कीमत $0.150 / 1M $1.150 / 1M
कैश पढ़ने की कीमत $0.004 / 1M $0.040 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 358,562 421,200
आउटपुट टोकन 4,266 1,100,052
रीजनिंग टोकन 189,410 0
प्रतिक्रिया समय (औसत) 7.62s 72.72s
प्रतिक्रिया समय (अधिकतम) 80.30s 364.99s
प्रतिक्रिया समय (कुल) 175.36s 1672.53s
पैरामीटर ~100B 198B कुल (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#208 Mercury 2.5

high
लागत
$0.001
समय
3.5s
टोकन
2,447 tok

#203 Step 3.7 Flash

high
लागत
$0.007
समय
63.6s
टोकन
6,030 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

तुलना जोड़ी बदलें