#99 Mercury 2
none- खर्च
- $0.002
- वेळ
- 1.8s
- टोकन्स
- 1,514 tok
Inception
प्रकाशन: 2026-02-24
चाचणी तारीख: 2026-04-11 01:44
inception/mercury-2::none
~100Bइतरबंद स्रोतअंदाजित
(medium)
(none)
सारांश
Mercury 2 AI BENCHY वर 4.8 स्कोर करते आणि #99 वर आहे. याची reliability लागू नाही, pass rate 27.8%, एकूण खर्च $0.007, आणि सरासरी response time 613ms आहे.
Mercury 2 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~100B
- आर्किटेक्चर
- इतर
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
4.8
सुसंगतता
9.0
लागू नाही
$0.007
एकूण आउटपुट टोकन्स
1,625
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.250 / 1M
आउटपुट किंमत
$0.750 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
2
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 03:05 पुन्हा चाचणी | 4.7 | 10.0 | $0.030 | तुलना करा | |
| 2026-07-16 23:13 नवीन चाचणी जोडली | 4.6 | 10.0 | $0.030 | तुलना करा | |
| 2026-06-04 14:27 नवीन चाचणी जोडली | 4.5 | 10.0 | $0.011 | तुलना करा | |
| 2026-05-22 00:39 सूट बदलला | 4.6 | 10.0 | $0.009 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 4.8 | लागू नाही | $0.007 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 4.8 | 9.0 | लागू नाही | 4/18 | 2 | 1,625 | 0 | $0.007 | 613ms |
| 2026-07-16 23:13 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 4.6 | 9.2 | 10.0 | 4/22 | 2 | 9,564 | 88,704 | $0.030 | 829ms |
| फरक | — | +0.2 | -0.2 | 0 | 0 | -7939 | -88704 | -$0.023 | -216ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Mercury 2nonevsCobuddymediumमोफत उपलब्धMercury 2nonevsMiniMax M2.5mediumMercury 2nonevsGranite 4.2 8BnoneMercury 2nonevsGLM 4.7 FlashmediumMercury 2nonevsTrinity Large Previewdefaultमोफत उपलब्धMercury 2nonevsgpt-oss-120bnoneMercury 2nonevsKAT Coder AIR V2.5defaultMercury 2nonevsMercury 2.5noneMercury 2nonevsNemotron 3 Supernoneमोफत उपलब्धMercury 2nonevsQwen3.5-9Bmedium
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 3.0 | 10.0 | |
| कोडिंग | 3.6 | 8.9 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 3.1 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |