नेविगेशन
Advertise here

KAT-Coder-Pro V2.5 (low) vs Step 3.7 Flash (high)

average score लगभग बराबर है: 6.5 vs 6.6. KAT-Coder-Pro V2.5 (low) की benchmark लागत कम है: $0.400 vs $1.350. KAT-Coder-Pro V2.5 (low) तेज है: 19.40s vs 72.72s, pass rates 65.2% vs 58.0%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-01

तुलना किए गए मॉडल

रैंक
#191
कुल आउटपुट टोकन
113,193
प्रतिक्रिया समय (औसत)
19.40s
कुल लागत
$0.400
रैंक
#190
कुल आउटपुट टोकन
1,100,052
प्रतिक्रिया समय (औसत)
72.72s
कुल लागत
$1.350
अनुशंसित मॉडल KAT-Coder-Pro V2.5 (low)

It has the best score here (6.5), while costing about 3.4x less than Step 3.7 Flash (high).

विस्तृत तुलना

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low रिलीज़: 2026-07-14 Step 3.7 Flash Step 3.7 Flash high रिलीज़: 2026-05-29
स्कोर 6.5 6.6
रैंक #191 #190
विश्वसनीयता 10.0 10.0
संगति 7.1 8.5
प्रयास 69/69 69/69
सही परीक्षण
प्रति प्रयास पास दर 65.2% 58.0%
अस्थिर टेस्ट 8 4
कुल रन 69 69
प्रति परिणाम लागत 3.636 12.267
कुल लागत $0.400 $1.350
इनपुट कीमत $0.740 / 1M $0.200 / 1M
आउटपुट कीमत $2.960 / 1M $1.150 / 1M
कुल इनपुट टोकन 87,682 421,200
आउटपुट टोकन 7,166 1,100,052
रीजनिंग टोकन 106,027 0
प्रतिक्रिया समय (औसत) 19.40s 72.72s
प्रतिक्रिया समय (अधिकतम) 209.15s 364.99s
प्रतिक्रिया समय (कुल) 446.11s 1672.53s
पैरामीटर ~700B कुल (~72B सक्रिय) 198B कुल (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#191 KAT-Coder-Pro V2.5

low
लागत
$0.016
समय
47.6s
टोकन
5,182 tok

#190 Step 3.7 Flash

high
लागत
$0.007
समय
63.6s
टोकन
6,030 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

त्वरित तुलना

तुलना जोड़ी बदलें