Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5 Plus 2026-02-15

Résumé

Le score moyen est pratiquement à égalité avec 8.0 vs 8.0. KAT-Coder-Pro V2.5 (low) a le coût de benchmark le plus bas avec $0.220 vs $0.310. KAT-Coder-Pro V2.5 (low) est plus rapide avec 10.44s vs 73.79s, avec des taux de réussite de 71.4% vs 73.0%.

Modèle recommandéKAT-Coder-Pro V2.5 (low)Il obtient le meilleur score ici (8.0) et répond environ 7.1x plus vite que Qwen3.5 Plus 2026-02-15 (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Sortie: 2026-07-14 Qwen3.5 Plus 2026-02-15 Qwen3.5 Plus 2026-02-15 medium Sortie: 2026-02-15
Score 8.0 8.0
Rang #35 #34
Fiabilité 9.9 10.0
Cohérence 7.3 8.8
Tests corrects
Taux de réussite par tentative 71.4% 73.0%
Tests instables 7 3
Exécutions totales 63 63
Coût par résultat 1.991 2.445
Coût total $0.220 $0.310
Prix d'entrée $0.740 / 1M $0.260 / 1M
Prix de sortie $2.960 / 1M $1.560 / 1M
Total des jetons d'entrée 42,750 40,918
Jetons de sortie 2,167 2,159
Jetons de raisonnement 61,133 189,604
Temps de réponse (moy.) 10.44s 73.79s
Temps de réponse (max) 51.34s 266.69s
Temps de réponse (total) 219.17s 1033.07s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Coût
$0.016
Temps
47.6s
Tokens
5,182 tok

#34 Qwen3.5 Plus 2026-02-15

medium
Coût
$0.011
Temps
125.5s
Tokens
7,040 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Qwen3.5 Plus 2026-02-15 6.6 7.1 44.4% 1 180.70s 6,950 420 80,595

Comparaison rapide

Changer la paire de comparaison