नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

KAT-Coder-Pro V2.5 (medium) vs Step 3.7 Flash (high)

KAT-Coder-Pro V2.5 (medium) average score मध्ये पुढे आहे: 6.9 vs 6.8. KAT-Coder-Pro V2.5 (medium) चा benchmark खर्च कमी आहे: $0.478 vs $1.229. KAT-Coder-Pro V2.5 (medium) वेगवान आहे: 24.87s vs 70.10s, pass rates 65.2% vs 60.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-29

क्रमांक
#126
एकूण आउटपुट टोकन्स
139,375
प्रतिसाद वेळ (सरासरी)
24.87s
एकूण खर्च
$0.478
क्रमांक
#131
एकूण आउटपुट टोकन्स
1,050,900
प्रतिसाद वेळ (सरासरी)
70.10s
एकूण खर्च
$1.229
शिफारस केलेले मॉडेल KAT-Coder-Pro V2.5 (medium)

It has the best score here (6.9), while costing about 2.6x less than Step 3.7 Flash (high).

तपशीलवार तुलना

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium प्रकाशन: 2026-07-14 Step 3.7 Flash Step 3.7 Flash high प्रकाशन: 2026-05-29
स्कोअर 6.9 6.8
क्रमांक #126 #131
विश्वसनीयता 10.0 10.0
सुसंगतता 7.0 8.4
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 65.2% 60.6%
अस्थिर चाचण्या 8 4
एकूण रन 66 66
प्रति निकाल खर्च 4.342 11.167
एकूण खर्च $0.478 $1.229
इनपुट किंमत $0.740 / 1M $0.200 / 1M
आउटपुट किंमत $2.960 / 1M $1.150 / 1M
एकूण इनपुट टोकन्स 87,916 98,700
आउटपुट टोकन्स 7,213 1,050,900
रिझनिंग टोकन्स 132,162 0
प्रतिसाद वेळ (सरासरी) 24.87s 70.10s
प्रतिसाद वेळ (कमाल) 257.00s 364.99s
प्रतिसाद वेळ (एकूण) 547.14s 1542.14s
पॅरामीटर्स ~700B एकूण (~72B सक्रिय) 198B एकूण (11B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#126 KAT-Coder-Pro V2.5

medium
खर्च
$0.009
वेळ
25.6s
टोकन्स
2,939 tok

#131 Step 3.7 Flash

high
खर्च
$0.007
वेळ
63.6s
टोकन्स
6,030 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

झटपट तुलना

तुलना जोडी बदला