#143 Mercury 2
none- खर्च
- $0.002
- वेळ
- 1.8s
- टोकन्स
- 1,514 tok
Inception
प्रकाशन: 2026-02-24
चाचणी तारीख: 2026-05-22 00:39
inception/mercury-2::none
(medium)
(none)
सारांश
Mercury 2 AI BENCHY वर 4.6 स्कोर करते आणि #143 वर आहे. याची reliability 10.0, pass rate 25.0%, एकूण खर्च $0.009, आणि सरासरी response time 614ms आहे.
Mercury 2 खास का आहे: हे Samanya Buddhimatta मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #13. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
4.6
सुसंगतता
9.1
10.0
$0.009
एकूण आउटपुट टोकन्स
2,984
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.250 / 1M
आउटपुट किंमत
$0.750 / 1M
अस्थिर चाचण्या
2
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 14:27 नवीन चाचणी जोडली | 4.5 | 10.0 | $0.011 | तुलना करा | |
| 2026-05-22 00:39 सूट बदलला | 4.6 | 10.0 | $0.009 | सध्याची रन | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 4.8 | लागू नाही | $0.007 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:39 · सूट बदलला | 4.6 | 9.1 | 10.0 | 4/20 | 2 | 2,984 | 0 | $0.009 | 614ms |
| 2026-06-04 14:27 · नवीन चाचणी जोडली | 4.5 | 9.2 | 10.0 | 4/21 | 2 | 4,439 | 28,113 | $0.011 | 653ms |
| फरक | +0.1 | -0.1 | 0.0 | 0 | 0 | -1455 | -28113 | -$0.002 | -39ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Mercury 2nonevsGPT-5.4 MininoneMercury 2nonevsDeepSeek V3.2noneMercury 2nonevsMiniMax M2.7mediumMercury 2nonevsQwen3.5 Plus 2026-04-20noneMercury 2nonevsQwen3.6 35B A3BnoneMercury 2nonevsGemini 3.5 FlashhighMercury 2nonevsGemini 3 Flash PreviewmediumMercury 2nonevsNemotron 3 Ultra 550b A55bmediumमोफत उपलब्धMercury 2nonevsGPT-5.5low
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 3.0 | 10.0 | |
| कोडिंग | 3.5 | 9.4 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 3.1 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |