AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-Flash

Résumé

KAT-Coder-Air V2.5 (high) mène au score moyen avec 6.2 vs 6.1. Qwen3.5-Flash a le coût de benchmark le plus bas avec $0.005 vs $0.064. Qwen3.5-Flash est plus rapide avec 3.58s vs 11.02s, avec des taux de réussite de 46.0% vs 39.7%.

Modèle recommandéQwen3.5-FlashSon score reste proche du meilleur score ici (6.1 vs 6.2) tout en coûtant environ 15.4x moins que KAT-Coder-Air V2.5 (high).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Sortie: 2026-07-14	Qwen3.5-Flash Qwen3.5-Flash none Sortie: 2026-02-24

Métrique	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Sortie: 2026-07-14	Qwen3.5-Flash Qwen3.5-Flash none Sortie: 2026-02-24
Score	6.2	6.1
Rang	#110	#119
Fiabilité	9.7	10.0
Cohérence	7.6	9.7
Tests corrects
Taux de réussite par tentative	46.0%	39.7%
Tests instables	6	1
Exécutions totales	63	63
Coût par résultat	0.910	0.075
Coût total	$0.064	$0.005
Prix d'entrée	$0.150 / 1M	$0.065 / 1M
Prix de sortie	$0.600 / 1M	$0.260 / 1M
Total des jetons d'entrée	41,748	46,439
Jetons de sortie	3,894	4,276
Jetons de raisonnement	91,773	0
Temps de réponse (moy.)	11.02s	3.58s
Temps de réponse (max)	104.98s	27.18s
Temps de réponse (total)	231.37s	75.28s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high

SVG invalide

Coût: $0.000
Temps: 300.0s
Tokens: 0 tok

#119 Qwen3.5-Flash

none

Coût: $0.003
Temps: 47.4s
Tokens: 7,799 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Catégorie:

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	6.9	5.8	75.0%	2		2.49s	615	204	1,290
Qwen3.5-Flash	3.5	8.3	8.3%	1		1.32s	696	690	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	4.3	7.3	11.1%	1		39.07s	6,948	1,166	55,883
Qwen3.5-Flash	5.5	10.0	33.3%	0		850ms	7,913	519	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		30.61s	15,132	422	8,958
Qwen3.5-Flash	3.0	10.0	0.0%	0		6.22s	18,879	1,794	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		3.59s	7,776	284	2,140
Qwen3.5-Flash	10.0	10.0	100.0%	0		1.57s	7,794	243	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	2.9	7.2	11.1%	1		7.47s	771	914	8,602
Qwen3.5-Flash	7.7	10.0	66.7%	0		905ms	789	15	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	5.1	10.0	0.0%	0		7.10s	516	179	539
Qwen3.5-Flash	10.0	10.0	100.0%	0		803ms	522	100	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	9.8	10.0	100.0%	0		1.51s	699	90	675
Qwen3.5-Flash	6.3	10.0	50.0%	0		8.81s	711	63	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	3.5	4.4	33.3%	2		2.47s	696	285	1,576
Qwen3.5-Flash	3.1	10.0	0.0%	0		10.89s	714	579	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		4.77s	8,391	330	1,082
Qwen3.5-Flash	10.0	10.0	100.0%	0		3.67s	8,211	264	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		21.72s	204	20	11,028
Qwen3.5-Flash	3.0	10.0	0.0%	0		588ms	210	9	0

Comparaison rapide

Changer la paire de comparaison