नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5-27B

सारांश

KAT-Coder-Pro V2.5 (low) average score मध्ये पुढे आहे: 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) चा benchmark खर्च कमी आहे: $0.220 vs $0.536. KAT-Coder-Pro V2.5 (low) वेगवान आहे: 10.44s vs 68.39s, pass rates 71.4% vs 73.0%.

शिफारस केलेले मॉडेलKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while costing about 2.4x less than Qwen3.5-27B (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14 Qwen3.5-27B Qwen3.5-27B medium प्रकाशन: 2026-02-24
स्कोअर 8.0 7.9
क्रमांक #35 #36
विश्वसनीयता 9.9 10.0
सुसंगतता 7.3 8.5
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.4% 73.0%
अस्थिर चाचण्या 7 4
एकूण रन 63 63
प्रति निकाल खर्च 1.991 4.901
एकूण खर्च $0.220 $0.536
इनपुट किंमत $0.740 / 1M $0.195 / 1M
आउटपुट किंमत $2.960 / 1M $1.560 / 1M
एकूण इनपुट टोकन्स 42,750 42,164
आउटपुट टोकन्स 2,167 8,534
रिझनिंग टोकन्स 61,133 329,289
प्रतिसाद वेळ (सरासरी) 10.44s 68.39s
प्रतिसाद वेळ (कमाल) 51.34s 234.36s
प्रतिसाद वेळ (एकूण) 219.17s 1436.24s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

#36 Qwen3.5-27B

medium
खर्च
$0.008
वेळ
62.0s
टोकन्स
3,099 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Qwen3.5-27B 6.2 7.1 55.6% 1 160.69s 7,895 6,381 89,388

झटपट तुलना

तुलना जोडी बदला