नेविगेशन
Advertise here

Gemini 3.5 Flash (minimal) vs Mercury 2.5 (medium)

Mercury 2.5 (medium) average score में आगे है: 6.8 vs 6.7. Mercury 2.5 (medium) की benchmark लागत कम है: $0.022 vs $0.300. Gemini 3.5 Flash (minimal) तेज है: 2.65s vs 3.19s, pass rates 60.6% vs 65.2%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-09-08

तुलना किए गए मॉडल

रैंक
#163
कुल आउटपुट टोकन
16,454
प्रतिक्रिया समय (औसत)
2.65s
कुल लागत
$0.300
रैंक
#157
कुल आउटपुट टोकन
120,129
प्रतिक्रिया समय (औसत)
3.19s
कुल लागत
$0.022
अनुशंसित मॉडल Mercury 2.5 (medium)

It has the best score here (6.8), while costing about 13.8x less than Gemini 3.5 Flash (minimal).

विस्तृत तुलना

मेट्रिक Gemini 3.5 Flash Gemini 3.5 Flash minimal रिलीज़: 2026-05-19 Mercury 2.5 Mercury 2.5 medium रिलीज़: 2026-09-08
स्कोर 6.7 6.8
रैंक #163 #157
विश्वसनीयता 10.0 9.8
संगति 9.6 8.6
प्रयास 66/66 66/66
सही परीक्षण
प्रति प्रयास पास दर 60.6% 65.2%
अस्थिर टेस्ट 1 4
कुल रन 66 66
प्रति परिणाम लागत 2.302 0.181
कुल लागत $0.300 $0.022
इनपुट कीमत $1.500 / 1M $0.040 / 1M
आउटपुट कीमत $9.000 / 1M $0.150 / 1M
कुल इनपुट टोकन 100,762 91,402
आउटपुट टोकन 16,454 3,138
रीजनिंग टोकन 0 116,991
प्रतिक्रिया समय (औसत) 2.65s 3.19s
प्रतिक्रिया समय (अधिकतम) 25.26s 9.87s
प्रतिक्रिया समय (कुल) 58.21s 70.18s
पैरामीटर ~500B कुल (~20B सक्रिय) ~100B
उपलब्धता बंद स्रोत बंद स्रोत

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Gemini 3.5 Flash

minimal
लागत
$0.041
समय
20.4s
टोकन
4,608 tok

#157 Mercury 2.5

medium
लागत
$0.001
समय
3.8s
टोकन
3,386 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Gemini 3.5 Flash 5.6 9.9 33.3% 0 2.75s 8,122 3,456 0
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

त्वरित तुलना

तुलना जोड़ी बदलें