नेव्हिगेशन
Advertise here

Mercury 2.5 (medium) vs KAT-Coder-Pro V2.5

average score जवळपास समान आहे: 6.8 vs 6.7. Mercury 2.5 (medium) चा benchmark खर्च कमी आहे: $0.022 vs $0.487. Mercury 2.5 (medium) वेगवान आहे: 3.19s vs 26.01s, pass rates 65.2% vs 71.2%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-08

तुलना केलेली मॉडेल्स

क्रमांक
#157
एकूण आउटपुट टोकन्स
120,129
प्रतिसाद वेळ (सरासरी)
3.19s
एकूण खर्च
$0.022
क्रमांक
#161
एकूण आउटपुट टोकन्स
139,572
प्रतिसाद वेळ (सरासरी)
26.01s
एकूण खर्च
$0.487
शिफारस केलेले मॉडेल Mercury 2.5 (medium)

It has the best score here (6.8), while costing about 22.4x less than KAT-Coder-Pro V2.5.

तपशीलवार तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 medium प्रकाशन: 2026-09-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14
स्कोअर 6.8 6.7
क्रमांक #157 #161
विश्वसनीयता 9.8 10.0
सुसंगतता 8.6 7.0
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 65.2% 71.2%
अस्थिर चाचण्या 4 8
एकूण रन 66 66
प्रति निकाल खर्च 0.181 4.419
एकूण खर्च $0.022 $0.487
इनपुट किंमत $0.040 / 1M $0.740 / 1M
आउटपुट किंमत $0.150 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 91,402 98,508
आउटपुट टोकन्स 3,138 139,572
रिझनिंग टोकन्स 116,991 0
प्रतिसाद वेळ (सरासरी) 3.19s 26.01s
प्रतिसाद वेळ (कमाल) 9.87s 335.41s
प्रतिसाद वेळ (एकूण) 70.18s 572.22s
पॅरामीटर्स ~100B ~700B एकूण (~72B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Mercury 2.5

medium
खर्च
$0.001
वेळ
3.8s
टोकन्स
3,386 tok

#161 KAT-Coder-Pro V2.5

none
खर्च
$0.010
वेळ
29.0s
टोकन्स
3,439 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0

झटपट तुलना

तुलना जोडी बदला