AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Z.ai: GLM 5.1

Résumé

GLM 5.1 mène au score moyen avec 5.6 vs 4.9. KAT-Coder-Air V2.5 a le coût de benchmark le plus bas avec $0.037 vs $0.057. GLM 5.1 est plus rapide avec 4.10s vs 6.99s, avec des taux de réussite de 38.1% vs 41.3%.

Modèle recommandéGLM 5.1Il obtient le meilleur score ici (5.6) et répond environ 1.7x plus vite que KAT-Coder-Air V2.5.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Sortie: 2026-07-14	GLM 5.1 GLM 5.1 none Sortie: 2026-04-07

Métrique	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Sortie: 2026-07-14	GLM 5.1 GLM 5.1 none Sortie: 2026-04-07
Score	4.9	5.6
Rang	#168	#141
Fiabilité	10.0	10.0
Cohérence	7.1	8.5
Tests corrects
Taux de réussite par tentative	38.1%	41.3%
Tests instables	7	4
Exécutions totales	63	63
Coût par résultat	0.724	0.843
Coût total	$0.037	$0.057
Prix d'entrée	$0.150 / 1M	$0.966 / 1M
Prix de sortie	$0.600 / 1M	$3.036 / 1M
Total des jetons d'entrée	41,328	47,133
Jetons de sortie	49,933	3,754
Jetons de raisonnement	0	0
Temps de réponse (moy.)	6.99s	4.10s
Temps de réponse (max)	24.94s	32.57s
Temps de réponse (total)	146.78s	86.18s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 KAT-Coder-Air V2.5

none

Coût: $0.002
Temps: 14.5s
Tokens: 2,619 tok

#141 GLM 5.1

none

SVG invalide

Coût: $0.000
Temps: 300.0s
Tokens: 0 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Catégorie:

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	5.3	5.6	50.0%	2		2.68s	672	3,044	0
GLM 5.1	4.0	6.3	25.0%	2		2.11s	555	305	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	3.3	9.6	0.0%	0		14.31s	6,472	16,918	0
GLM 5.1	3.9	9.7	0.0%	0		4.96s	7,256	525	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	4.7	1.6	66.7%	1		24.94s	15,131	6,788	0
GLM 5.1	2.8	2.1	33.3%	1		32.57s	22,831	2,129	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	6.3	5.8	66.7%	1		2.66s	7,776	1,268	0
GLM 5.1	10.0	10.0	100.0%	0		1.08s	7,107	204	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	2.9	7.2	11.1%	1		6.24s	771	7,818	0
GLM 5.1	2.9	7.2	11.1%	1		1.99s	687	24	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	5.0	10.0	0.0%	0		12.02s	516	656	0
GLM 5.1	5.0	10.0	0.0%	0		790ms	477	39	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	9.9	10.0	100.0%	0		1.75s	699	858	0
GLM 5.1	9.8	10.0	100.0%	0		1.98s	636	66	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	2.9	4.4	22.2%	2		1.84s	696	1,255	0
GLM 5.1	7.7	10.0	66.7%	0		1.45s	609	151	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		5.13s	8,391	1,560	0
GLM 5.1	10.0	10.0	100.0%	0		10.68s	6,789	300	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		17.96s	204	9,768	0
GLM 5.1	3.0	10.0	0.0%	0		2.34s	186	11	0

Comparaison rapide

Changer la paire de comparaison

CobuddymediumvsKAT-Coder-Air V2.5none KAT-Coder-Air V2.5nonevsMiniMax M2.5medium KAT-Coder-Air V2.5nonevsMistral Small 4medium KAT-Coder-Air V2.5nonevsQwen3 Coder Nextmedium KAT-Coder-Air V2.5nonevsMiniMax M2.7medium North Mini CodemediumDisponible gratuitementvsGLM 5.1none MiniMax M2.7mediumvsGLM 5.1none KAT-Coder-Air V2.5lowvsGLM 5.1none Mistral Small 4mediumvsGLM 5.1none Gemini 3.1 Flash LiteminimalvsGLM 5.1none KAT-Coder-Air V2.5mediumvsGLM 5.1none KAT-Coder-Air V2.5nonevsGLM 4.7 Flashmedium