Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Kwaipilot: KAT-Coder-Pro V2.5

Résumé

Claude Opus 4.8 (low) mène au score moyen avec 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) a le coût de benchmark le plus bas avec $0.246 vs $1.270. Claude Opus 4.8 (low) est plus rapide avec 10.83s vs 12.30s, avec des taux de réussite de 79.4% vs 63.5%.

Modèle recommandéKAT-Coder-Pro V2.5 (high)Son score reste proche du meilleur score ici (7.7 vs 7.7) tout en coûtant environ 5.2x moins que Claude Opus 4.8 (low).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique Claude Opus 4.8 Claude Opus 4.8 low Sortie: 2026-05-28 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Sortie: 2026-07-14
Score 7.7 7.7
Rang #47 #53
Fiabilité 10.0 10.0
Cohérence 8.8 8.1
Tests corrects
Taux de réussite par tentative 79.4% 63.5%
Tests instables 3 5
Exécutions totales 63 63
Coût par résultat 8.466 2.228
Coût total $1.270 $0.246
Prix d'entrée $5.000 / 1M $0.740 / 1M
Prix de sortie $25.000 / 1M $2.960 / 1M
Total des jetons d'entrée 60,946 42,750
Jetons de sortie 31,771 2,509
Jetons de raisonnement 6,831 69,594
Temps de réponse (moy.) 10.83s 12.30s
Temps de réponse (max) 127.97s 95.65s
Temps de réponse (total) 227.39s 258.34s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Opus 4.8

low
Coût
$0.031
Temps
14.1s
Tokens
1,345 tok

#53 KAT-Coder-Pro V2.5

high
Coût
$0.009
Temps
26.4s
Tokens
3,117 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Comparaison rapide

Changer la paire de comparaison