नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

KAT-Coder-Pro V2.5 vs MiMo-V2.5-Pro (medium)

average score जवळपास समान आहे: 6.7 vs 6.8. MiMo-V2.5-Pro (medium) चा benchmark खर्च कमी आहे: $0.221 vs $0.487. KAT-Coder-Pro V2.5 वेगवान आहे: 26.01s vs 48.68s, pass rates 71.2% vs 63.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-29

क्रमांक
#141
एकूण आउटपुट टोकन्स
139,572
प्रतिसाद वेळ (सरासरी)
26.01s
एकूण खर्च
$0.487
क्रमांक
#137
एकूण आउटपुट टोकन्स
185,466
प्रतिसाद वेळ (सरासरी)
48.68s
एकूण खर्च
$0.221
शिफारस केलेले मॉडेल MiMo-V2.5-Pro (medium)

It has the best score here (6.8), while costing about 2.2x less than KAT-Coder-Pro V2.5.

तपशीलवार तुलना

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14 MiMo-V2.5-Pro MiMo-V2.5-Pro medium प्रकाशन: 2026-04-22
स्कोअर 6.7 6.8
क्रमांक #141 #137
विश्वसनीयता 10.0 10.0
सुसंगतता 7.0 7.9
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.2% 63.6%
अस्थिर चाचण्या 8 6
एकूण रन 66 66
प्रति निकाल खर्च 4.419 3.790
एकूण खर्च $0.487 $0.221
इनपुट किंमत $0.740 / 1M $0.435 / 1M
आउटपुट किंमत $2.960 / 1M $0.870 / 1M
एकूण इनपुट टोकन्स 98,508 139,892
आउटपुट टोकन्स 139,572 15,569
रिझनिंग टोकन्स 0 169,897
प्रतिसाद वेळ (सरासरी) 26.01s 48.68s
प्रतिसाद वेळ (कमाल) 335.41s 333.34s
प्रतिसाद वेळ (एकूण) 572.22s 1071.02s
पॅरामीटर्स ~700B एकूण (~72B सक्रिय) 1.02T एकूण (42B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#141 KAT-Coder-Pro V2.5

none
खर्च
$0.010
वेळ
29.0s
टोकन्स
3,439 tok

#137 MiMo-V2.5-Pro

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
MiMo-V2.5-Pro 6.2 4.7 66.7% 2 92.07s 6,543 780 51,218

झटपट तुलना

तुलना जोडी बदला