नेव्हिगेशन
Advertise here

Mercury 2.5 Preview (medium) vs GPT-6 Sol

average score जवळपास समान आहे: 6.8 vs 6.8. Mercury 2.5 Preview (medium) चा benchmark खर्च कमी आहे: $0.037 vs $0.551. Mercury 2.5 Preview (medium) वेगवान आहे: 6.66s vs 9.02s, pass rates 66.7% vs 63.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक
#171
एकूण आउटपुट टोकन्स
150,107
प्रतिसाद वेळ (सरासरी)
6.66s
एकूण खर्च
$0.037
क्रमांक
#172
एकूण आउटपुट टोकन्स
7,989
प्रतिसाद वेळ (सरासरी)
9.02s
एकूण खर्च
$0.551
शिफारस केलेले मॉडेल Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 15.0x less than GPT-6 Sol.

तपशीलवार तुलना

मेट्रिक Mercury 2.5 Preview Mercury 2.5 Preview medium प्रकाशन: 2026-09-02 GPT-6 Sol GPT-6 Sol none प्रकाशन: 2026-09-23
स्कोअर 6.8 6.8
क्रमांक #171 #172
विश्वसनीयता 10.0 10.0
सुसंगतता 9.6 8.5
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 66.7% 63.8%
अस्थिर चाचण्या 1 4
एकूण रन 69 69
प्रति निकाल खर्च 0.244 4.232
एकूण खर्च $0.037 $0.551
इनपुट किंमत $0.000 / 1M $2.000 / 1M
आउटपुट किंमत $0.000 / 1M $10.000 / 1M
एकूण इनपुट टोकन्स 397,291 235,086
आउटपुट टोकन्स 6,355 7,989
रिझनिंग टोकन्स 143,752 0
प्रतिसाद वेळ (सरासरी) 6.66s 9.02s
प्रतिसाद वेळ (कमाल) 74.63s 57.02s
प्रतिसाद वेळ (एकूण) 153.29s 207.45s
पॅरामीटर्स ~100B ~2T एकूण (~150B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#171 Mercury 2.5 Preview

medium
खर्च
$0.001
वेळ
2.7s
टोकन्स
2,241 tok

#172 GPT-6 Sol

none
खर्च
$0.030
वेळ
31.9s
टोकन्स
3,055 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-6 Sol 5.5 10.0 33.3% 0 12.23s 7,302 389 0

झटपट तुलना

तुलना जोडी बदला