Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

Résumé

Le score moyen est pratiquement à égalité avec 7.5 vs 7.6. GPT-5.6 Luna (medium) a le coût de benchmark le plus bas avec $0.258 vs $0.275. GPT-5.6 Luna (medium) est plus rapide avec 6.70s vs 12.95s, avec des taux de réussite de 65.1% vs 63.5%.

Modèle recommandéGPT-5.6 Luna (medium)Il obtient le meilleur score ici (7.6) et répond environ 1.9x plus vite que KAT-Coder-Pro V2.5 (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Sortie: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna medium Sortie: 2026-07-09
Score 7.5 7.6
Rang #60 #57
Fiabilité 10.0 10.0
Cohérence 7.7 9.6
Tests corrects
Taux de réussite par tentative 65.1% 63.5%
Tests instables 6 1
Exécutions totales 63 63
Coût par résultat 2.498 1.978
Coût total $0.275 $0.258
Prix d'entrée $0.740 / 1M $1.000 / 1M
Prix de sortie $2.960 / 1M $6.000 / 1M
Total des jetons d'entrée 42,750 35,699
Jetons de sortie 2,098 2,148
Jetons de raisonnement 80,027 34,740
Temps de réponse (moy.) 12.95s 6.70s
Temps de réponse (max) 81.45s 29.85s
Temps de réponse (total) 271.92s 140.62s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Coût
$0.009
Temps
25.6s
Tokens
2,939 tok

#57 GPT-5.6 Luna

medium
Coût
$0.014
Temps
14.6s
Tokens
2,362 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928

Comparaison rapide

Changer la paire de comparaison