#223 Mercury 2
medium- खर्च
- $0.002
- वेळ
- 2.1s
- टोकन्स
- 1,702 tok
सारांश
Mercury 2 AI BENCHY वर 6.6 स्कोर करते आणि #223 वर आहे. याची reliability 10.0, pass rate 53.6%, एकूण खर्च $0.121, आणि सरासरी response time 4.40s आहे.
Mercury 2 खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डोमेन-विशिष्ट हा सर्वात कमकुवत भाग आहे, rank #15. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.6
सुसंगतता
8.1
10.0
$0.121
एकूण आउटपुट टोकन्स
96,943
एकूण इनपुट टोकन्स
189,300
इनपुट किंमत
$0.250 / 1M
आउटपुट किंमत
$0.750 / 1M
कॅश वाचण्याची किंमत
$0.025 / 1M
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 02:52 पुन्हा चाचणी | 6.6 | 10.0 | $0.121 | सध्याची रन | |
| 2026-07-16 23:14 नवीन चाचणी जोडली | 7.0 | 10.0 | $0.093 | तुलना करा | |
| 2026-06-04 14:27 नवीन चाचणी जोडली | 6.6 | 10.0 | $0.058 | तुलना करा | |
| 2026-05-22 00:40 पुन्हा चाचणी | 6.3 | 10.0 | $0.055 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 6.5 | लागू नाही | $0.047 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 02:52 · सध्याची रन | 69/69 प्रयत्न | 6.6 | 8.1 | 10.0 | 10/23 | 5 | 96,943 | 189,300 | $0.121 | 4.40s |
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 6.5 | 8.6 | लागू नाही | 8/18 | 3 | 52,305 | 0 | $0.047 | 2.21s |
| फरक | — | +0.1 | -0.5 | +2 | +2 | +44638 | +189300 | +$0.074 | +2194ms |
बेंचमार्क कव्हरेज वेगळे आहे: 69/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.250 / 1M | $0.750 / 1M | लागू नाही | लागू नाही |
| 2026-10-01 18:33 | $0.250 / 1M | $0.750 / 1M | $0.025 / 1M | लागू नाही |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 4.7 | 1.6 | |
| अँटी-एआय युक्त्या | 6.9 | 9.9 | |
| कोडिंग | 8.2 | 7.7 | |
| संयुक्त | 6.7 | 9.1 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 5.4 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |