नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-27B

सारांश

KAT-Coder-Air V2.5 (low) average score मध्ये पुढे आहे: 6.0 vs 5.9. Qwen3.5-27B चा benchmark खर्च कमी आहे: $0.015 vs $0.030. Qwen3.5-27B वेगवान आहे: 1.68s vs 6.47s, pass rates 46.0% vs 38.1%.

शिफारस केलेले मॉडेलQwen3.5-27BIts score stays close to the best score here (5.9 vs 6.0), while costing about 2.1x less than KAT-Coder-Air V2.5 (low).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low प्रकाशन: 2026-07-14 Qwen3.5-27B Qwen3.5-27B none प्रकाशन: 2026-02-24
स्कोअर 6.0 5.9
क्रमांक #124 #128
विश्वसनीयता 9.7 10.0
सुसंगतता 7.6 9.3
बरोबर चाचण्या
प्रति प्रयत्न पास दर 46.0% 38.1%
अस्थिर चाचण्या 6 2
एकूण रन 63 63
प्रति निकाल खर्च 0.427 0.249
एकूण खर्च $0.030 $0.015
इनपुट किंमत $0.150 / 1M $0.195 / 1M
आउटपुट किंमत $0.600 / 1M $1.560 / 1M
एकूण इनपुट टोकन्स 42,464 44,478
आउटपुट टोकन्स 4,227 3,592
रिझनिंग टोकन्स 34,864 0
प्रतिसाद वेळ (सरासरी) 6.47s 1.68s
प्रतिसाद वेळ (कमाल) 25.49s 9.39s
प्रतिसाद वेळ (एकूण) 135.80s 35.25s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#124 KAT-Coder-Air V2.5

low
खर्च
$0.004
वेळ
29.9s
टोकन्स
6,008 tok

#128 Qwen3.5-27B

none
खर्च
$0.007
वेळ
42.9s
टोकन्स
4,273 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
Qwen3.5-27B 5.8 10.0 33.3% 0 1.80s 7,913 415 0

झटपट तुलना

तुलना जोडी बदला