Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Résumé

Le score moyen est pratiquement à égalité avec 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) a le coût de benchmark le plus bas avec $0.246 vs $2.053. KAT-Coder-Pro V2.5 (high) est plus rapide avec 12.30s vs 25.89s, avec des taux de réussite de 61.9% vs 63.5%.

Modèle recommandéKAT-Coder-Pro V2.5 (high)Il obtient le meilleur score ici (7.7) tout en coûtant environ 8.4x moins que Claude Opus 4.6 (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique Claude Opus 4.6 Claude Opus 4.6 medium Sortie: 2026-02-05 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Sortie: 2026-07-14
Score 7.7 7.7
Rang #50 #53
Fiabilité 10.0 10.0
Cohérence 8.8 8.1
Tests corrects
Taux de réussite par tentative 61.9% 63.5%
Tests instables 3 5
Exécutions totales 63 63
Coût par résultat 17.103 2.228
Coût total $2.053 $0.246
Prix d'entrée $5.000 / 1M $0.740 / 1M
Prix de sortie $25.000 / 1M $2.960 / 1M
Total des jetons d'entrée 53,227 42,750
Jetons de sortie 47,446 2,509
Jetons de raisonnement 24,000 69,594
Temps de réponse (moy.) 25.89s 12.30s
Temps de réponse (max) 83.40s 95.65s
Temps de réponse (total) 362.49s 258.34s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#50 Claude Opus 4.6

medium
SVG invalide
Coût
$0.000
Temps
300.0s
Tokens
0 tok

#53 KAT-Coder-Pro V2.5

high
Coût
$0.009
Temps
26.4s
Tokens
3,117 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.6 5.7 7.1 44.4% 1 30.10s 8,522 13,057 4,121
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Comparaison rapide

Changer la paire de comparaison