Navigare
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-27B

Rezumat

KAT-Coder-Air V2.5 (low) conduce la scorul mediu cu 6.0 vs 5.9. Qwen3.5-27B are costul de benchmark mai mic, $0.015 vs $0.030. Qwen3.5-27B este mai rapid cu 1.68s vs 6.47s, cu rate de reușită de 46.0% vs 38.1%.

Model recomandatQwen3.5-27BScorul rămâne aproape de cel mai bun scor de aici (5.9 vs 6.0) și costă de aproximativ 2.1x mai puțin decât KAT-Coder-Air V2.5 (low).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Lansare: 2026-07-14 Qwen3.5-27B Qwen3.5-27B none Lansare: 2026-02-24
Scor 6.0 5.9
Rang #124 #128
Fiabilitate 9.7 10.0
Consistență 7.6 9.3
Teste corecte
Rată de trecere pe încercare 46.0% 38.1%
Teste instabile 6 2
Rulări totale 63 63
Cost per rezultat 0.427 0.249
Cost total $0.030 $0.015
Preț de intrare $0.150 / 1M $0.195 / 1M
Preț de ieșire $0.600 / 1M $1.560 / 1M
Total tokenuri de intrare 42,464 44,478
Tokenuri de ieșire 4,227 3,592
Tokenuri de raționament 34,864 0
Timp de răspuns (mediu) 6.47s 1.68s
Timp de răspuns (maxim) 25.49s 9.39s
Timp de răspuns (total) 135.80s 35.25s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#124 KAT-Coder-Air V2.5

low
Cost
$0.004
Timp
29.9s
Tokenuri
6,008 tok

#128 Qwen3.5-27B

none
Cost
$0.007
Timp
42.9s
Tokenuri
4,273 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
Qwen3.5-27B 5.8 10.0 33.3% 0 1.80s 7,913 415 0

Comparație rapidă

Schimbă perechea de comparație