नेविगेशन
Advertise here

ERNIE-Light-DT-1.0 (low) vs Mercury 2.5 (medium)

average score लगभग बराबर है: 6.4 vs 6.4. Mercury 2.5 (medium) की benchmark लागत कम है: $0.034 vs $0.489. Mercury 2.5 (medium) तेज है: 7.74s vs 8.91s, pass rates 65.2% vs 63.8%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-11-13

तुलना किए गए मॉडल

रैंक
#288
कुल आउटपुट टोकन
43,895
प्रतिक्रिया समय (औसत)
8.91s
कुल लागत
$0.489
रैंक
#286
कुल आउटपुट टोकन
138,946
प्रतिक्रिया समय (औसत)
7.74s
कुल लागत
$0.034
अनुशंसित मॉडल Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 14.6x less than ERNIE-Light-DT-1.0 (low).

विस्तृत तुलना

मेट्रिक ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low रिलीज़: 2026-11-12 Mercury 2.5 Mercury 2.5 medium रिलीज़: 2026-09-08
स्कोर 6.4 6.4
रैंक #288 #286
विश्वसनीयता 9.3 9.7
संगति 7.0 8.3
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 65.2% 63.8%
अस्थिर टेस्ट 9 5
कुल रन 69 69
प्रति परिणाम लागत 4.441 0.280
कुल लागत $0.489 $0.034
इनपुट कीमत $1.130 / 1M $0.040 / 1M
आउटपुट कीमत $3.941 / 1M $0.150 / 1M
कैश पढ़ने की कीमत $0.113 / 1M $0.004 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 279,234 317,982
आउटपुट टोकन 13,328 3,918
रीजनिंग टोकन 30,567 135,028
प्रतिक्रिया समय (औसत) 8.91s 7.74s
प्रतिक्रिया समय (अधिकतम) 96.92s 107.89s
प्रतिक्रिया समय (कुल) 204.98s 178.07s
पैरामीटर ~320B कुल (~18B सक्रिय) ~100B
उपलब्धता बंद स्रोत बंद स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
लागत
$0.005
समय
7.7s
टोकन
1,177 tok

#286 Mercury 2.5

medium
लागत
$0.001
समय
3.8s
टोकन
3,386 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

तुलना जोड़ी बदलें