नेव्हिगेशन
Advertise here

ERNIE-Light-DT-1.0 (low) vs Mercury 2.5 (medium)

average score जवळपास समान आहे: 6.4 vs 6.4. Mercury 2.5 (medium) चा benchmark खर्च कमी आहे: $0.034 vs $0.489. Mercury 2.5 (medium) वेगवान आहे: 7.74s vs 8.91s, pass rates 65.2% vs 63.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक
#288
एकूण आउटपुट टोकन्स
43,895
प्रतिसाद वेळ (सरासरी)
8.91s
एकूण खर्च
$0.489
क्रमांक
#286
एकूण आउटपुट टोकन्स
138,946
प्रतिसाद वेळ (सरासरी)
7.74s
एकूण खर्च
$0.034
शिफारस केलेले मॉडेल Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 14.6x less than ERNIE-Light-DT-1.0 (low).

तपशीलवार तुलना

मेट्रिक ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low प्रकाशन: 2026-11-12 Mercury 2.5 Mercury 2.5 medium प्रकाशन: 2026-09-08
स्कोअर 6.4 6.4
क्रमांक #288 #286
विश्वसनीयता 9.3 9.7
सुसंगतता 7.0 8.3
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 65.2% 63.8%
अस्थिर चाचण्या 9 5
एकूण रन 69 69
प्रति निकाल खर्च 4.441 0.280
एकूण खर्च $0.489 $0.034
इनपुट किंमत $1.130 / 1M $0.040 / 1M
आउटपुट किंमत $3.941 / 1M $0.150 / 1M
कॅश वाचण्याची किंमत $0.113 / 1M $0.004 / 1M
कॅश लिहिण्याची किंमत लागू नाही लागू नाही
एकूण इनपुट टोकन्स 279,234 317,982
आउटपुट टोकन्स 13,328 3,918
रिझनिंग टोकन्स 30,567 135,028
प्रतिसाद वेळ (सरासरी) 8.91s 7.74s
प्रतिसाद वेळ (कमाल) 96.92s 107.89s
प्रतिसाद वेळ (एकूण) 204.98s 178.07s
पॅरामीटर्स ~320B एकूण (~18B सक्रिय) ~100B
उपलब्धता बंद स्रोत बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
खर्च
$0.005
वेळ
7.7s
टोकन्स
1,177 tok

#286 Mercury 2.5

medium
खर्च
$0.001
वेळ
3.8s
टोकन्स
3,386 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

तुलना जोडी बदला