#99 Mercury 2
none- लागत
- $0.002
- समय
- 1.8s
- टोकन
- 1,514 tok
Inception
रिलीज़: 2026-02-24
परीक्षण किया गया: 2026-04-11 01:44
inception/mercury-2::none
(medium)
(none)
सारांश
Mercury 2 AI BENCHY पर 4.8 स्कोर करता है और #99 पर है। इसकी reliability लागू नहीं, pass rate 27.8%, कुल लागत $0.007, और औसत response time 613ms है।
Mercury 2 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
4.8
संगति
9.0
लागू नहीं
$0.007
कुल आउटपुट टोकन
1,625
कुल इनपुट टोकन
0
इनपुट कीमत
$0.250 / 1M
आउटपुट कीमत
$0.750 / 1M
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-07-16 23:13 नया टेस्ट जोड़ा गया | 4.6 | 10.0 | $0.030 | तुलना करें | |
| 2026-06-04 14:27 नया टेस्ट जोड़ा गया | 4.5 | 10.0 | $0.011 | तुलना करें | |
| 2026-05-22 00:39 सूट बदला गया | 4.6 | 10.0 | $0.009 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 4.8 | लागू नहीं | $0.007 | वर्तमान रन |
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 4.8 | 9.0 | लागू नहीं | 4/18 | 2 | 1,625 | 0 | $0.007 | 613ms |
| 2026-07-16 23:13 · नया टेस्ट जोड़ा गया | 4.6 | 9.2 | 10.0 | 4/22 | 2 | 9,564 | 88,704 | $0.030 | 829ms |
| अंतर | +0.2 | -0.2 | 0 | 0 | -7939 | -88704 | -$0.023 | -216ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mercury 2nonevsInklingnoneMercury 2nonevsQwen3 Coder NextnoneMercury 2nonevsMistral Small 4mediumMercury 2nonevsLing-2.6-1TnoneMercury 2nonevsMiMo-V2.5noneMercury 2nonevsGemini 3 Flash PreviewmediumMercury 2nonevsGemini 3.5 FlashhighMercury 2nonevsNemotron 3 Ultramediumनिःशुल्क उपलब्धMercury 2nonevsGPT-5.5low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.0 | 10.0 | |
| कोडिंग | 3.6 | 8.9 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 3.1 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |