नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 Preview (medium) vs Qwen3.8 2.4T A95B (high)

Mercury 2.5 Preview (medium) average score में आगे है: 7.5 vs 7.4. Mercury 2.5 Preview (medium) की benchmark लागत कम है: $0.024 vs $2.357. Mercury 2.5 Preview (medium) तेज है: 3.58s vs 120.59s, pass rates 69.7% vs 74.2%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-09-02

रैंक
#91
कुल आउटपुट टोकन
127,034
प्रतिक्रिया समय (औसत)
3.58s
कुल लागत
$0.024
रैंक
#99
कुल आउटपुट टोकन
456,028
प्रतिक्रिया समय (औसत)
120.59s
कुल लागत
$2.357
अनुशंसित मॉडल Mercury 2.5 Preview (medium)

It has the best score here (7.5), while costing about 100.0x less than Qwen3.8 2.4T A95B (high).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Preview Mercury 2.5 Preview medium रिलीज़: 2026-09-02 Qwen3.8 2.4T A95B Qwen3.8 2.4T A95B high रिलीज़: 2026-08-12
स्कोर 7.5 7.4
रैंक #91 #99
विश्वसनीयता 10.0 9.4
संगति 9.6 8.3
प्रयास 66/66 66/66
सही परीक्षण
प्रति प्रयास पास दर 69.7% 74.2%
अस्थिर टेस्ट 1 4
कुल रन 66 66
प्रति परिणाम लागत 0.158 16.832
कुल लागत $0.024 $2.357
इनपुट कीमत $0.040 / 1M $2.000 / 1M
आउटपुट कीमत $0.150 / 1M $6.000 / 1M
कुल इनपुट टोकन 112,713 108,931
आउटपुट टोकन 5,436 112,801
रीजनिंग टोकन 121,598 343,227
प्रतिक्रिया समय (औसत) 3.58s 120.59s
प्रतिक्रिया समय (अधिकतम) 17.84s 532.28s
प्रतिक्रिया समय (कुल) 78.66s 2653.05s
पैरामीटर ~100B 2.4T कुल (95B सक्रिय)
उपलब्धता बंद स्रोत वेट उपलब्ध

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
लागत
$0.001
समय
2.7s
टोकन
2,241 tok

#99 Qwen3.8 2.4T A95B

high
अमान्य SVG
लागत
$0.000
समय
600.0s
टोकन
0 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Qwen3.8 2.4T A95B 5.9 6.3 55.6% 1 160.52s 6,399 3,310 48,078

त्वरित तुलना

तुलना जोड़ी बदलें