नेविगेशन
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

KAT-Coder-Pro V2.5 (default) vs Step 5 Preview (medium)

average score लगभग बराबर है: 6.1 vs 6.1. KAT-Coder-Pro V2.5 (default) की benchmark लागत कम है: $0.742 vs $4.136. KAT-Coder-Pro V2.5 (default) तेज है: 24.96s vs 136.10s, pass rates 68.1% vs 53.6%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-09

तुलना किए गए मॉडल

रैंक
#252
कुल आउटपुट टोकन
139,572
प्रतिक्रिया समय (औसत)
24.96s
कुल लागत
$0.742
रैंक
#250
कुल आउटपुट टोकन
1,434,621
प्रतिक्रिया समय (औसत)
136.10s
कुल लागत
$4.136
अनुशंसित मॉडल KAT-Coder-Pro V2.5 (default)

It has the best score here (6.1), while costing about 5.6x less than Step 5 Preview (medium).

विस्तृत तुलना

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default रिलीज़: 2026-07-14 Step 5 Preview Step 5 Preview medium रिलीज़: 2026-10-09
स्कोर 6.1 6.1
रैंक #252 #250
विश्वसनीयता 10.0 9.6
संगति 7.1 8.2
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 68.1% 53.6%
अस्थिर टेस्ट 8 5
कुल रन 69 69
प्रति परिणाम लागत 4.419 41.354
कुल लागत $0.742 $4.136
इनपुट कीमत $0.740 / 1M $1.000 / 1M
आउटपुट कीमत $2.960 / 1M $2.700 / 1M
कैश पढ़ने की कीमत $0.150 / 1M $0.050 / 1M
कैश लिखने की कीमत लागू नहीं लागू नहीं
कुल इनपुट टोकन 98,508 261,842
आउटपुट टोकन 8,088 1,434,621
रीजनिंग टोकन 131,484 0
प्रतिक्रिया समय (औसत) 24.96s 136.10s
प्रतिक्रिया समय (अधिकतम) 335.41s 438.09s
प्रतिक्रिया समय (कुल) 574.12s 3130.27s
पैरामीटर ~700B कुल (~72B सक्रिय) 600B कुल (27B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#252 KAT-Coder-Pro V2.5

default
लागत
$0.010
समय
29.0s
टोकन
3,439 tok

#250 Step 5 Preview

medium
लागत
$0.042
समय
90.3s
टोकन
15,574 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989
Step 5 Preview 2.8 7.2 11.1% 1 363.90s 7,428 546,725 0

तुलना जोड़ी बदलें