नेव्हिगेशन
Advertise here

Ember-1 (high) vs Mercury 2.5 Preview (medium)

Ember-1 (high) average score मध्ये पुढे आहे: 6.9 vs 6.8. Mercury 2.5 Preview (medium) चा benchmark खर्च कमी आहे: $0.037 vs $2.405. Mercury 2.5 Preview (medium) वेगवान आहे: 6.66s vs 58.14s, pass rates 71.0% vs 66.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक
#163
एकूण आउटपुट टोकन्स
121,223
प्रतिसाद वेळ (सरासरी)
58.14s
एकूण खर्च
$2.405
क्रमांक
#171
एकूण आउटपुट टोकन्स
150,107
प्रतिसाद वेळ (सरासरी)
6.66s
एकूण खर्च
$0.037
शिफारस केलेले मॉडेल Mercury 2.5 Preview (medium)

Its score stays close to the best score here (6.8 vs 6.9), while costing about 65.8x less than Ember-1 (high).

तपशीलवार तुलना

मेट्रिक Ember-1 Ember-1 high प्रकाशन: 2026-09-28 Mercury 2.5 Preview Mercury 2.5 Preview medium प्रकाशन: 2026-09-02
स्कोअर 6.9 6.8
क्रमांक #163 #171
विश्वसनीयता 8.6 10.0
सुसंगतता 7.2 9.6
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.0% 66.7%
अस्थिर चाचण्या 8 1
एकूण रन 69 69
प्रति निकाल खर्च 20.041 0.244
एकूण खर्च $2.405 $0.037
इनपुट किंमत $3.000 / 1M $0.000 / 1M
आउटपुट किंमत $15.000 / 1M $0.000 / 1M
एकूण इनपुट टोकन्स 195,489 397,291
आउटपुट टोकन्स 12,475 6,355
रिझनिंग टोकन्स 108,748 143,752
प्रतिसाद वेळ (सरासरी) 58.14s 6.66s
प्रतिसाद वेळ (कमाल) 255.06s 74.63s
प्रतिसाद वेळ (एकूण) 1337.19s 153.29s
पॅरामीटर्स ~2.8T एकूण (~104B सक्रिय) ~100B
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Ember-1

high
खर्च
$0.038
वेळ
55.1s
टोकन्स
2,671 tok

#171 Mercury 2.5 Preview

medium
खर्च
$0.001
वेळ
2.7s
टोकन्स
2,241 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126

झटपट तुलना

तुलना जोडी बदला