- Rang
- #288
- Total des jetons de sortie
- 114,654
- Temps de réponse (moy.)
- 15.23s
- Coût total
- $0.077
KAT Coder AIR V2.5 (high) vs Mistral Small 4 (medium)
Le score moyen est pratiquement à égalité avec 5.2 vs 5.1. KAT Coder AIR V2.5 (high) a le coût de benchmark le plus bas avec $0.077 vs $0.126. Mistral Small 4 (medium) est plus rapide avec 12.68s vs 15.23s, avec des taux de réussite de 40.6% vs 42.0%.
Modèles comparés
- Rang
- #291
- Total des jetons de sortie
- 136,501
- Temps de réponse (moy.)
- 12.68s
- Coût total
- $0.126
Modèle recommandé
KAT Coder AIR V2.5 (high)
Il obtient le meilleur score ici (5.2) tout en coûtant environ 1.6x moins que Mistral Small 4 (medium).
Comparaison détaillée
| Métrique | KAT Coder AIR V2.5 KAT Coder AIR V2.5 high | Mistral Small 4 Mistral Small 4 medium |
|---|---|---|
| Score | 5.2 | 5.1 |
| Rang | #288 | #291 |
| Fiabilité | 9.8 | 9.7 |
| Cohérence | 8.2 | 7.1 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 40.6% | 42.0% |
| Tests instables | 5 | 8 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 1.091 | 2.502 |
| Coût total | $0.077 | $0.126 |
| Prix d'entrée | $0.000 / 1M | $0.150 / 1M |
| Prix de sortie | $0.000 / 1M | $0.600 / 1M |
| Total des jetons d'entrée | 50,423 | 321,955 |
| Jetons de sortie | 4,144 | 41,555 |
| Jetons de raisonnement | 110,510 | 94,946 |
| Temps de réponse (moy.) | 15.23s | 12.68s |
| Temps de réponse (max) | 118.35s | 59.15s |
| Temps de réponse (total) | 350.26s | 291.66s |
| Paramètres | ~35B au total (~3B actifs) | 119B au total (6B actifs) |
| Disponibilité | Source fermée | Open source |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#288 KAT Coder AIR V2.5
high
Reached the allocated time limit (300 seconds) without receiving showcase output.
- Coût
- $0.000
- Temps
- 300.0s
- Tokens
- 0 tok
#291 Mistral Small 4
medium- Coût
- $0.006
- Temps
- 47.9s
- Tokens
- 9,857 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.10s | 0 | 0 | 0 | |
| Mistral Small 4 | 5.0 | 10.0 | 0.0% | 0 | 54.05s | 181,396 | 1,287 | 1,617 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.9 | 5.8 | 75.0% | 2 | 2.49s | 615 | 204 | 1,290 | |
| Mistral Small 4 | 5.6 | 3.8 | 66.7% | 3 | 2.67s | 708 | 4,055 | 4,778 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 4.3 | 7.3 | 11.1% | 1 | 39.07s | 6,948 | 1,166 | 55,883 | |
| Mistral Small 4 | 4.4 | 5.1 | 33.3% | 2 | 39.98s | 7,636 | 11,635 | 54,715 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 74.48s | 23,854 | 485 | 28,559 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 32.40s | 116,624 | 17,890 | 18,384 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 3.59s | 7,776 | 284 | 2,140 | |
| Mistral Small 4 | 7.3 | 5.9 | 83.3% | 1 | 1.23s | 6,171 | 335 | 723 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 7.28s | 724 | 1,101 | 7,738 | |
| Mistral Small 4 | 5.9 | 7.2 | 55.6% | 1 | 6.33s | 807 | 3,427 | 7,871 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 5.1 | 10.0 | 0.0% | 0 | 7.10s | 516 | 179 | 539 | |
| Mistral Small 4 | 4.8 | 10.0 | 0.0% | 0 | 2.05s | 519 | 821 | 828 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 9.8 | 10.0 | 100.0% | 0 | 1.51s | 699 | 90 | 675 | |
| Mistral Small 4 | 7.3 | 5.8 | 83.3% | 1 | 1.38s | 729 | 540 | 1,031 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.5 | 4.4 | 33.3% | 2 | 2.47s | 696 | 285 | 1,576 | |
| Mistral Small 4 | 3.4 | 9.7 | 0.0% | 0 | 2.17s | 735 | 1,226 | 2,632 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 8,391 | 330 | 1,082 | |
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 3.50s | 6,420 | 321 | 810 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 21.72s | 204 | 20 | 11,028 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 5.92s | 210 | 18 | 1,557 |
Comparaison rapide
Changer la paire de comparaison
Mercury 2.5lowvsMistral Small 4mediumMistral Small 4mediumvsMiMo-V2.5-PrononeLing 3.0 FlashnonevsKAT Coder AIR V2.5highKAT Coder AIR V2.5highvsInkling SmalllowDisponible gratuitementKAT Coder AIR V2.5highvsMistral Small 4noneMistral Small 4mediumvsNemotron 3.5 LightninghighDisponible gratuitementMercury 2.5lowvsKAT Coder AIR V2.5highKAT Coder AIR V2.5highvsMiMo-V2.5-PrononeLing 3.0 FlashnonevsMistral Small 4mediumMistral Small 4mediumvsInkling SmalllowDisponible gratuitementKAT Coder AIR V2.5highvsQwen3.6 35B A3BnoneKAT Coder AIR V2.5highvsLaguna XS 2.1noneDisponible gratuitement