नेविगेशन
Advertise here

Mercury 2.5 Preview (medium) vs Beam 1.0 501B A23B (xhigh)

Mercury 2.5 Preview (medium) average score में आगे है: 6.8 vs 6.5. Mercury 2.5 Preview (medium) की benchmark लागत कम है: $0.039 vs $0.688. Mercury 2.5 Preview (medium) तेज है: 6.66s vs 9.18s, pass rates 66.7% vs 63.8%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-17

तुलना किए गए मॉडल

रैंक
#199
कुल आउटपुट टोकन
150,107
प्रतिक्रिया समय (औसत)
6.66s
कुल लागत
$0.039
रैंक
#226
कुल आउटपुट टोकन
158,497
प्रतिक्रिया समय (औसत)
9.18s
कुल लागत
$0.688
अनुशंसित मॉडल Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 17.9x less than Beam 1.0 501B A23B (xhigh).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Preview Mercury 2.5 Preview medium रिलीज़: 2026-09-02 Beam 1.0 501B A23B Beam 1.0 501B A23B xhigh रिलीज़: 2026-10-17
स्कोर 6.8 6.5
रैंक #199 #226
विश्वसनीयता 10.0 10.0
संगति 9.6 8.3
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 66.7% 63.8%
अस्थिर टेस्ट 1 5
कुल रन 69 69
प्रति परिणाम लागत 0.244 5.730
कुल लागत $0.039 $0.688
इनपुट कीमत $0.040 / 1M $1.000 / 1M
आउटपुट कीमत $0.150 / 1M $3.000 / 1M
कैश पढ़ने की कीमत लागू नहीं $0.100 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 397,291 212,065
आउटपुट टोकन 6,355 4,428
रीजनिंग टोकन 143,752 154,069
प्रतिक्रिया समय (औसत) 6.66s 9.18s
प्रतिक्रिया समय (अधिकतम) 74.63s 44.64s
प्रतिक्रिया समय (कुल) 153.29s 211.12s
पैरामीटर ~100B 501B कुल (23B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#199 Mercury 2.5 Preview

medium
लागत
$0.001
समय
2.7s
टोकन
2,241 tok

#226 Beam 1.0 501B A23B

xhigh
लागत
$0.009
समय
16.5s
टोकन
6,827 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 20.68s 7,801 585 46,192

तुलना जोड़ी बदलें