नेविगेशन
Advertise here

Mercury 2.5 vs KAT Coder AIR V2.5 (default)

KAT Coder AIR V2.5 (default) average score में आगे है: 4.4 vs 4.1. Mercury 2.5 की benchmark लागत कम है: $0.026 vs $0.070. Mercury 2.5 तेज है: 5.10s vs 11.96s, pass rates 24.6% vs 34.8%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-19

तुलना किए गए मॉडल

रैंक
#397
कुल आउटपुट टोकन
89,958
प्रतिक्रिया समय (औसत)
5.10s
कुल लागत
$0.026
रैंक
#387
कुल आउटपुट टोकन
97,752
प्रतिक्रिया समय (औसत)
11.96s
कुल लागत
$0.070
अनुशंसित मॉडल KAT Coder AIR V2.5 (default)

इस तुलना में इसका स्कोर सबसे अधिक है (4.4) और 2 मॉडलों में लागत और प्रतिक्रिया समय का समग्र संतुलन सबसे अच्छा है।

विस्तृत तुलना

मेट्रिक Mercury 2.5 Mercury 2.5 none रिलीज़: 2026-09-08 KAT Coder AIR V2.5 KAT Coder AIR V2.5 default रिलीज़: 2026-07-14
स्कोर 4.1 4.4
रैंक #397 #387
विश्वसनीयता 10.0 10.0
संगति 7.6 7.4
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 24.6% 34.8%
अस्थिर टेस्ट 7 7
कुल रन 69 69
प्रति परिणाम लागत 1.298 1.382
कुल लागत $0.026 $0.070
इनपुट कीमत $0.040 / 1M $0.150 / 1M
आउटपुट कीमत $0.150 / 1M $0.600 / 1M
कैश पढ़ने की कीमत $0.004 / 1M लागू नहीं
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 311,488 69,376
आउटपुट टोकन 89,958 7,792
रीजनिंग टोकन 0 89,960
प्रतिक्रिया समय (औसत) 5.10s 11.96s
प्रतिक्रिया समय (अधिकतम) 63.41s 121.05s
प्रतिक्रिया समय (कुल) 117.24s 275.18s
पैरामीटर ~100B ~35B कुल (~3B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#397 Mercury 2.5

none
लागत
$0.001
समय
2.7s
टोकन
2,749 tok

#387 KAT Coder AIR V2.5

default
लागत
$0.002
समय
14.5s
टोकन
2,619 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886

तुलना जोड़ी बदलें