#126 KAT-Coder-Pro V2.5
medium- Coût
- $0.009
- Temps
- 25.6s
- Tokens
- 2,939 tok
Résumé
KAT-Coder-Pro V2.5 obtient 6.9 sur AI BENCHY et se classe #126. Il affiche une fiabilité de 10.0, un taux de réussite de 65.2%, un coût total de $0.478 et un temps de réponse moyen de 24.87s.
Ce qui rend KAT-Coder-Pro V2.5 unique : Il se distingue surtout en Programmation, où il se classe #4, tandis que Analyse et extraction des données est son point le plus faible avec #14.
Date de recherche : 2026-08-12
Meilleure estimation fondée sur les informations publiques ; le fournisseur n’a pas communiqué toutes les valeurs.
6.9
Cohérence
7.0
10.0
$0.478
Total des jetons de sortie
139,375
Total des jetons d'entrée
87,916
Prix d'entrée
$0.740 / 1M
Prix de sortie
$2.960 / 1M
Tests instables
8
Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Historique des runs
| Testé le | Score | Fiabilité | Tests corrects | Coût total | Comparer |
|---|---|---|---|---|---|
| 2026-08-14 03:24 Nouveau test | 6.9 | 10.0 | $0.478 | Exécution actuelle | |
| 2026-07-16 23:47 Nouveau test ajouté | 6.9 | 10.0 | $0.467 | Comparer | |
| 2026-07-14 11:05 Premier run | 7.5 | 10.0 | $0.275 | Comparer |
Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.
Comparaison de runs
| Run | Couverture du benchmark | Score | Cohérence | Fiabilité | Tests corrects | Tests instables | Total des jetons de sortie | Total des jetons d'entrée | Coût total | Temps de réponse (moy.) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 03:24 · Exécution actuelle | 66/66 tentatives | 6.9 | 7.0 | 10.0 | 11/22 | 8 | 139,375 | 87,916 | $0.478 | 24.87s |
| 2026-07-14 11:05 · Premier run | 63/63 tentatives | 7.5 | 7.7 | 10.0 | 11/21 | 6 | 82,125 | 42,750 | $0.275 | 12.95s |
| Différence | — | -0.6 | -0.7 | 0.0 | 0 | +2 | +57250 | +45166 | +$0.203 | +11921ms |
La couverture du benchmark diffère : 66/66 tentatives (Objectif : 3 répétitions par test) contre 63/63 tentatives (Objectif : 3 répétitions par test). Les totaux et les métriques sensibles aux répétitions ne sont pas directement comparables.
Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.
Historique des prix
Données historiques de tarification pour ce modèle provenant d'OpenRouter.
| Date | Prix d'entrée | Prix de sortie |
|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M |
Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.
| Catégorie | Score | Cohérence | Tests corrects |
|---|---|---|---|
| Astuces anti-IA | 8.2 | 7.9 | |
| Programmation | 7.8 | 10.0 | |
| Combiné | 6.4 | 5.8 | |
| Analyse et extraction des données | 7.3 | 5.9 | |
| Spécifique au domaine | 2.9 | 4.4 | |
| Intelligence générale | 4.7 | 3.1 | |
| Suivi des instructions | 9.9 | 10.0 | |
| Résolution d'énigmes | 5.9 | 4.5 | |
| Appel d'outils | 10.0 | 10.0 | |
| Culture générale | 3.0 | 10.0 |