नेविगेशन
Advertise here

Gemini 3.1 Flash Lite Preview (low) vs Mercury 2.5 (medium)

Mercury 2.5 (medium) average score में आगे है: 6.4 vs 6.3. Mercury 2.5 (medium) की benchmark लागत कम है: $0.034 vs $0.736. Mercury 2.5 (medium) तेज है: 7.74s vs 19.04s, pass rates 60.9% vs 63.8%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-01

तुलना किए गए मॉडल

रैंक
#215
कुल आउटपुट टोकन
438,891
प्रतिक्रिया समय (औसत)
19.04s
कुल लागत
$0.736
रैंक
#206
कुल आउटपुट टोकन
138,946
प्रतिक्रिया समय (औसत)
7.74s
कुल लागत
$0.034
अनुशंसित मॉडल Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 21.9x less than Gemini 3.1 Flash Lite Preview (low).

विस्तृत तुलना

मेट्रिक Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview low रिलीज़: 2026-03-03 Mercury 2.5 Mercury 2.5 medium रिलीज़: 2026-09-08
स्कोर 6.3 6.4
रैंक #215 #206
विश्वसनीयता 10.0 9.7
संगति 10.0 8.3
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 60.9% 63.8%
अस्थिर टेस्ट 0 5
कुल रन 69 69
प्रति परिणाम लागत 5.256 0.280
कुल लागत $0.736 $0.034
इनपुट कीमत $0.250 / 1M $0.040 / 1M
आउटपुट कीमत $1.500 / 1M $0.150 / 1M
कुल इनपुट टोकन 309,715 317,982
आउटपुट टोकन 16,170 3,918
रीजनिंग टोकन 422,721 135,028
प्रतिक्रिया समय (औसत) 19.04s 7.74s
प्रतिक्रिया समय (अधिकतम) 309.35s 107.89s
प्रतिक्रिया समय (कुल) 437.98s 178.07s
पैरामीटर ~150B कुल (~10B सक्रिय) ~100B
उपलब्धता बंद स्रोत बंद स्रोत

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#215 Gemini 3.1 Flash Lite Preview

low
लागत
$0.002
समय
3.7s
टोकन
1,203 tok

#206 Mercury 2.5

medium
लागत
$0.001
समय
3.8s
टोकन
3,386 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 1.39s 8,138 660 1,060
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

त्वरित तुलना

तुलना जोड़ी बदलें