AI BENCHY
Advertise here
#154

Mercury 2

Inception प्रकाशन: 2026-02-24 चाचणी तारीख: 2026-06-04 14:27 inception/mercury-2::none
(medium) (none)

सारांश

Mercury 2 AI BENCHY वर 4.6 स्कोर करते आणि #154 वर आहे. याची reliability 10.0, pass rate 23.8%, एकूण खर्च $0.011, आणि सरासरी response time 653ms आहे.

Mercury 2 खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #11. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

स्कोअर

4.6

सुसंगतता

9.2

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.011

एकूण आउटपुट टोकन्स

4,439

एकूण इनपुट टोकन्स

28,113

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$0.750 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 17

प्रति प्रयत्न पास दर: 23.8%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

653ms

प्रतिसाद वेळ (कमाल): 1.43s

प्रतिसाद वेळ (एकूण): 13.72s

चुकीचे उत्तर: 16 सूचनांचे पालन केले नाही: 1

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#154 Mercury 2

none
Cost
$0.002
Time
1.8s
Tokens
1,514 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-06-04 14:27 नवीन चाचणी जोडली 4.5 10.0 $0.011 सध्याची रन
2026-05-22 00:39 सूट बदलला 4.6 10.0 $0.009 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 4.8 लागू नाही $0.007 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-04 15:40 $0.250 / 1M $0.750 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

Mercury 2nonevsQwen3.5 Plus 2026-04-20noneMercury 2nonevsGrok 4.20noneMercury 2nonevsGemma 4 26B A4Bnoneमोफत उपलब्धMercury 2nonevsGPT-5.4 MininoneMercury 2nonevsGemini 3.5 FlashhighMercury 2nonevsGemini 3 Flash PreviewmediumMercury 2nonevsNemotron 3 Ultra 550b A55bmediumमोफत उपलब्धMercury 2nonevsGPT-5.5low

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 3.0 10.0
कोडिंग 3.4 9.6
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 7.3 5.9
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.8 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 3.1 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स