नेविगेशन
Advertise here

Mercury 2.5 (medium) vs Beam 1.0 501B A23B (low)

average score लगभग बराबर है: 6.4 vs 6.4. Mercury 2.5 (medium) की benchmark लागत कम है: $0.034 vs $0.432. Beam 1.0 501B A23B (low) तेज है: 4.89s vs 7.74s, pass rates 63.8% vs 60.9%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-17

तुलना किए गए मॉडल

रैंक
#239
कुल आउटपुट टोकन
138,946
प्रतिक्रिया समय (औसत)
7.74s
कुल लागत
$0.034
रैंक
#238
कुल आउटपुट टोकन
71,250
प्रतिक्रिया समय (औसत)
4.89s
कुल लागत
$0.432
अनुशंसित मॉडल Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 12.9x less than Beam 1.0 501B A23B (low).

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 medium रिलीज़: 2026-09-08 Beam 1.0 501B A23B Beam 1.0 501B A23B low रिलीज़: 2026-10-17
स्कोर 6.4 6.4
रैंक #239 #238
विश्वसनीयता 9.7 10.0
संगति 8.3 8.0
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 63.8% 60.9%
अस्थिर टेस्ट 5 6
कुल रन 69 69
प्रति परिणाम लागत 0.280 3.926
कुल लागत $0.034 $0.432
इनपुट कीमत $0.040 / 1M $1.000 / 1M
आउटपुट कीमत $0.150 / 1M $3.000 / 1M
कैश पढ़ने की कीमत $0.004 / 1M $0.100 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 317,982 218,076
आउटपुट टोकन 3,918 4,863
रीजनिंग टोकन 135,028 66,387
प्रतिक्रिया समय (औसत) 7.74s 4.89s
प्रतिक्रिया समय (अधिकतम) 107.89s 29.49s
प्रतिक्रिया समय (कुल) 178.07s 112.55s
पैरामीटर ~100B 501B कुल (23B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#239 Mercury 2.5

medium
लागत
$0.001
समय
3.8s
टोकन
3,386 tok

#238 Beam 1.0 501B A23B

low
लागत
$0.006
समय
12.0s
टोकन
4,777 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 7.29s 7,791 569 17,401

तुलना जोड़ी बदलें