Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-9B

Résumé

KAT-Coder-Air V2.5 mène au score moyen avec 4.9 vs 3.8. Qwen3.5-9B (medium) a le coût de benchmark le plus bas avec $0.036 vs $0.037. KAT-Coder-Air V2.5 est plus rapide avec 6.99s vs 82.24s, avec des taux de réussite de 38.1% vs 27.0%.

Modèle recommandéKAT-Coder-Air V2.5Il obtient le meilleur score ici (4.9) et répond environ 11.8x plus vite que Qwen3.5-9B (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Sortie: 2026-07-14 Qwen3.5-9B Qwen3.5-9B medium Sortie: 2026-03-02
Score 4.9 3.8
Rang #168 #193
Fiabilité 10.0 6.7
Cohérence 7.1 8.0
Tests corrects
Taux de réussite par tentative 38.1% 27.0%
Tests instables 7 5
Exécutions totales 63 63
Coût par résultat 0.724 1.187
Coût total $0.037 $0.036
Prix d'entrée $0.150 / 1M $0.100 / 1M
Prix de sortie $0.600 / 1M $0.150 / 1M
Total des jetons d'entrée 41,328 17,070
Jetons de sortie 49,933 29,045
Jetons de raisonnement 0 209,516
Temps de réponse (moy.) 6.99s 82.24s
Temps de réponse (max) 24.94s 226.38s
Temps de réponse (total) 146.78s 1315.88s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 KAT-Coder-Air V2.5

none
Coût
$0.002
Temps
14.5s
Tokens
2,619 tok

#193 Qwen3.5-9B

medium
Coût
$0.001
Temps
35.9s
Tokens
3,030 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0
Qwen3.5-9B 2.9 10.0 0.0% 0 100.88s 2,396 7,890 41,129

Comparaison rapide

Changer la paire de comparaison