AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#151

Mercury 2

Inception रिलीज़: 2026-02-24 परीक्षण किया गया: 2026-06-04 14:27 inception/mercury-2::none
(medium) (none)

सारांश

Mercury 2 AI BENCHY पर 4.6 स्कोर करता है और #151 पर है। इसकी reliability 10.0, pass rate 23.8%, कुल लागत $0.011, और औसत response time 653ms है।

Mercury 2 को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #9 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

संगति

9.2

कुल आउटपुट टोकन

4,439

कुल इनपुट टोकन

28,113

इनपुट कीमत

$0.250 / 1M

आउटपुट कीमत

$0.750 / 1M

सही परीक्षण

गलत टेस्ट: 17

प्रति प्रयास पास दर: 23.8%

अस्थिर टेस्ट

2

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

653ms

प्रतिक्रिया समय (अधिकतम): 1.43s

प्रतिक्रिया समय (कुल): 13.72s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#151 Mercury 2

none
लागत
$0.002
समय
1.8s
टोकन
1,514 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 14:27 नया टेस्ट जोड़ा गया 4.5 10.0 $0.011 वर्तमान रन
2026-05-22 00:39 सूट बदला गया 4.6 10.0 $0.009 तुलना करें
2026-04-11 01:44 पहला दर्ज रन 4.8 लागू नहीं $0.007 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-06-04 14:27 · वर्तमान रन4.69.210.04/2124,43928,113$0.011653ms
2026-05-22 00:39 · सूट बदला गया4.69.110.04/2022,9840$0.009614ms
अंतर0.0+0.10.000+1455+28113+$0.002+39ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 15:40 $0.250 / 1M $0.750 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.0 10.0
कोडिंग 3.4 9.6
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 7.3 5.9
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.8 10.0
निर्देश पालन 6.5 10.0
पहेली समाधान 3.1 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल