Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Z.ai: GLM 5.1

Résumé

KAT-Coder-Air V2.5 (high) mène au score moyen avec 5.6 vs 5.5. KAT-Coder-Air V2.5 (high) a le coût de benchmark le plus bas avec $0.077 vs $0.164. GLM 5.1 est plus rapide avec 6.70s vs 15.90s, avec des taux de réussite de 43.9% vs 40.9%.

Modèle recommandéKAT-Coder-Air V2.5 (high)Il obtient le meilleur score ici (5.6) tout en coûtant environ 2.1x moins que GLM 5.1.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-17

Métrique KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Sortie: 2026-07-14 GLM 5.1 GLM 5.1 none Sortie: 2026-04-07
Score 5.6 5.5
Rang #137 #144
Fiabilité 9.9 10.0
Cohérence 7.7 8.2
Tests corrects
Taux de réussite par tentative 43.9% 40.9%
Tests instables 6 5
Exécutions totales 66 66
Coût par résultat 1.097 2.368
Coût total $0.077 $0.164
Prix d'entrée $0.150 / 1M $0.966 / 1M
Prix de sortie $0.600 / 1M $3.036 / 1M
Total des jetons d'entrée 50,470 124,209
Jetons de sortie 3,957 14,393
Jetons de raisonnement 111,374 0
Temps de réponse (moy.) 15.90s 6.70s
Temps de réponse (max) 118.35s 61.20s
Temps de réponse (total) 349.71s 147.38s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#137 KAT-Coder-Air V2.5

high
SVG invalide
Coût
$0.000
Temps
300.0s
Tokens
0 tok

#144 GLM 5.1

none
SVG invalide
Coût
$0.000
Temps
300.0s
Tokens
0 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GLM 5.1 3.9 9.7 0.0% 0 4.96s 7,256 525 0

Comparaison rapide

Changer la paire de comparaison