- Rang
- #235
- Total des jetons de sortie
- 139,375
- Temps de réponse (moy.)
- 23.94s
- Coût total
- $0.669
KAT-Coder-Pro V2.5 (medium) vs Mistral Large 4 (medium)
KAT-Coder-Pro V2.5 (medium) mène au score moyen avec 6.2 vs 6.2. KAT-Coder-Pro V2.5 (medium) a le coût de benchmark le plus bas avec $0.669 vs $1.456. KAT-Coder-Pro V2.5 (medium) est plus rapide avec 23.94s vs 265.03s, avec des taux de réussite de 62.3% vs 55.1%.
Modèles comparés
- Rang
- #240
- Total des jetons de sortie
- 627,233
- Temps de réponse (moy.)
- 265.03s
- Coût total
- $1.456
Modèle recommandé
KAT-Coder-Pro V2.5 (medium)
Il obtient le meilleur score ici (6.2) tout en coûtant environ 2.2x moins que Mistral Large 4 (medium).
Comparaison détaillée
| Métrique | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium | Mistral Large 4 Mistral Large 4 medium |
|---|---|---|
| Score | 6.2 | 6.2 |
| Rang | #235 | #240 |
| Fiabilité | 10.0 | 9.2 |
| Cohérence | 7.2 | 7.6 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 62.3% | 55.1% |
| Tests instables | 8 | 7 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 4.342 | 16.168 |
| Coût total | $0.669 | $1.456 |
| Prix d'entrée | $0.740 / 1M | $0.680 / 1M |
| Prix de sortie | $2.960 / 1M | $2.090 / 1M |
| Prix de lecture du cache | $0.150 / 1M | $0.070 / 1M |
| Prix d’écriture du cache | N/D | N/D |
| Total des jetons d'entrée | 87,916 | 212,024 |
| Jetons de sortie | 7,213 | 166,422 |
| Jetons de raisonnement | 132,162 | 562,095 |
| Temps de réponse (moy.) | 23.94s | 265.03s |
| Temps de réponse (max) | 257.00s | 1760.20s |
| Temps de réponse (total) | 550.52s | 6095.69s |
| Paramètres | ~700B au total (~72B actifs) | 1.05T au total (49B actifs) |
| Disponibilité | Source fermée | Source fermée |
Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#235 KAT-Coder-Pro V2.5
medium- Coût
- $0.009
- Temps
- 25.6s
- Tokens
- 2,939 tok
#240 Mistral Large 4
medium- Coût
- $0.011
- Temps
- 63.4s
- Tokens
- 5,291 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 3.38s | 0 | 0 | 0 | |
| Mistral Large 4 | 6.1 | 3.1 | 66.7% | 1 | 173.21s | 135,844 | 7,482 | 13,709 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 8.2 | 7.9 | 83.3% | 1 | 3.90s | 672 | 208 | 3,868 | |
| Mistral Large 4 | 8.3 | 10.0 | 75.0% | 0 | 15.73s | 705 | 1,087 | 7,308 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.8 | 10.0 | 66.7% | 0 | 33.10s | 7,893 | 416 | 33,658 | |
| Mistral Large 4 | 3.4 | 7.2 | 22.2% | 1 | 1201.87s | 7,189 | 33,530 | 303,140 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 5.8 | 66.7% | 1 | 135.75s | 60,289 | 5,478 | 51,591 | |
| Mistral Large 4 | 7.3 | 5.8 | 83.3% | 1 | 510.65s | 51,756 | 8,436 | 82,002 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.3 | 5.9 | 83.3% | 1 | 4.70s | 7,776 | 275 | 2,122 | |
| Mistral Large 4 | 10.0 | 10.0 | 100.0% | 0 | 25.95s | 7,314 | 1,046 | 7,861 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 2.9 | 4.4 | 22.2% | 2 | 35.11s | 780 | 36 | 33,495 | |
| Mistral Large 4 | 2.9 | 7.2 | 11.1% | 1 | 288.04s | 798 | 85,691 | 114,373 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 4.7 | 3.1 | 33.3% | 1 | 2.35s | 516 | 92 | 381 | |
| Mistral Large 4 | 3.5 | 2.2 | 33.3% | 1 | 39.33s | 516 | 4,704 | 4,909 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 9.9 | 10.0 | 100.0% | 0 | 2.58s | 699 | 83 | 971 | |
| Mistral Large 4 | 8.3 | 10.0 | 50.0% | 0 | 24.62s | 708 | 6,709 | 7,691 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 5.9 | 4.5 | 66.7% | 2 | 3.20s | 696 | 325 | 1,867 | |
| Mistral Large 4 | 6.1 | 4.7 | 66.7% | 2 | 41.40s | 717 | 8,254 | 10,519 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 19.02s | 8,391 | 282 | 1,010 | |
| Mistral Large 4 | 10.0 | 10.0 | 100.0% | 0 | 19.19s | 6,267 | 303 | 1,104 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 9.87s | 204 | 18 | 3,199 | |
| Mistral Large 4 | 3.0 | 10.0 | 0.0% | 0 | 84.68s | 210 | 9,180 | 9,479 |
Comparaison rapide
Changer la paire de comparaison
KAT-Coder-Pro V2.5mediumvsSpace Bunny AlphaxhighDeepSeek V4 Flash 0731nonevsKAT-Coder-Pro V2.5mediumClaude Fable 5.1lowvsMistral Large 4mediumGemini 3.1 Flash Lite PreviewnonevsKAT-Coder-Pro V2.5mediumGemini 3.5 FlashnonevsMistral Large 4mediumGemini 3.1 Flash Lite PreviewnonevsMistral Large 4mediumDeepSeek V4 Flash 0423nonevsKAT-Coder-Pro V2.5mediumClaude Fable 5.1lowvsKAT-Coder-Pro V2.5mediumDeepSeek V4 Flash 0731nonevsMistral Large 4mediumTrinity Large ThinkinglowvsKAT-Coder-Pro V2.5mediumApodex 1.1 MinilowDisponible gratuitementvsMistral Large 4mediumMistral Large 4mediumvsInklingnoneDisponible gratuitement