- Rang
- #378
- Total des jetons de sortie
- 66,576
- Temps de réponse (moy.)
- 8.32s
- Coût total
- $0.048
KAT Coder AIR V2.5 (medium) vs Nemotron 3.5 Lightning (high)
Nemotron 3.5 Lightning (high) mène au score moyen avec 5.2 vs 5.1. KAT Coder AIR V2.5 (medium) a le coût de benchmark le plus bas avec $0.048 vs $0.168. KAT Coder AIR V2.5 (medium) est plus rapide avec 8.32s vs 77.08s, avec des taux de réussite de 43.5% vs 47.8%.
Modèles comparés
- Rang
- #371
- Total des jetons de sortie
- 626,081
- Temps de réponse (moy.)
- 77.08s
- Coût total
- $0.168
Modèle recommandé
KAT Coder AIR V2.5 (medium)
Son score reste proche du meilleur score ici (5.1 vs 5.2) tout en coûtant environ 3.5x moins que Nemotron 3.5 Lightning (high).
Comparaison détaillée
| Métrique | KAT Coder AIR V2.5 KAT Coder AIR V2.5 medium | Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Disponible gratuitement |
|---|---|---|
| Score | 5.1 | 5.2 |
| Rang | #378 | #371 |
| Fiabilité | 9.6 | 9.6 |
| Cohérence | 8.9 | 5.7 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 43.5% | 47.8% |
| Tests instables | 3 | 12 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 0.596 | 0.000 |
| Coût total | $0.048 | $0.168 |
| Prix d'entrée | $0.150 / 1M | $0.060 / 1M |
| Prix de sortie | $0.600 / 1M | $0.160 / 1M |
| Prix de lecture du cache | N/D | $0.030 / 1M |
| Prix d’écriture du cache | N/D | N/D |
| Total des jetons d'entrée | 51,369 | 170,517 |
| Jetons de sortie | 8,008 | 149,968 |
| Jetons de raisonnement | 58,568 | 509,725 |
| Temps de réponse (moy.) | 8.32s | 77.08s |
| Temps de réponse (max) | 48.19s | 490.99s |
| Temps de réponse (total) | 191.40s | 1772.78s |
| Paramètres | ~35B au total (~3B actifs) | 30B au total (3B actifs) |
| Disponibilité | Source fermée | Poids disponibles |
Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#378 KAT Coder AIR V2.5
medium- Coût
- $0.003
- Temps
- 23.7s
- Tokens
- 4,924 tok
#371 Nemotron 3.5 Lightning
high- Coût
- $0.000
- Temps
- 92.8s
- Tokens
- 11,343 tok
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 0 | 0 | 0 | |
| Nemotron 3.5 Lightning | 3.5 | 8.3 | 0.0% | 0 | 490.99s | 52,501 | 1,624 | 3,472 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 8.7 | 8.0 | 91.7% | 1 | 3.79s | 672 | 549 | 4,194 | |
| Nemotron 3.5 Lightning | 5.5 | 3.7 | 66.7% | 3 | 10.29s | 696 | 2,432 | 15,948 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.0 | 22.2% | 1 | 23.37s | 7,893 | 5,199 | 29,973 | |
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 168.41s | 7,623 | 68,533 | 242,319 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 19.56s | 23,854 | 435 | 6,811 | |
| Nemotron 3.5 Lightning | 6.4 | 10.0 | 50.0% | 0 | 160.45s | 90,257 | 17,550 | 119,725 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 3.65s | 7,776 | 268 | 1,881 | |
| Nemotron 3.5 Lightning | 7.3 | 5.9 | 83.3% | 1 | 13.99s | 7,944 | 3,210 | 16,835 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 6.58s | 668 | 673 | 4,670 | |
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 88.61s | 798 | 45,616 | 72,496 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 5.0 | 10.0 | 0.0% | 0 | 9.81s | 516 | 189 | 557 | |
| Nemotron 3.5 Lightning | 3.7 | 9.5 | 0.0% | 0 | 7.58s | 516 | 4,331 | 4,408 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 1.50s | 699 | 93 | 730 | |
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 4.98s | 723 | 502 | 3,779 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.2 | 22.2% | 1 | 1.87s | 696 | 265 | 1,184 | |
| Nemotron 3.5 Lightning | 3.6 | 1.8 | 44.4% | 3 | 6.09s | 726 | 1,236 | 9,851 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 8,391 | 317 | 906 | |
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 6.92s | 8,526 | 3,745 | 3,781 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 15.74s | 204 | 20 | 7,662 | |
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 77.98s | 207 | 1,189 | 17,111 |
Comparaison rapide
Changer la paire de comparaison
Mercury 2.5lowvsKAT Coder AIR V2.5mediumKAT Coder AIR V2.5mediumvsMiMo-V2.5-PrononeLing 3.0 FlashnonevsNemotron 3.5 LightninghighDisponible gratuitementKAT Coder AIR V2.5mediumvsMistral Small 4noneNemotron 3.5 LightninghighDisponible gratuitementvsInkling SmalllowDisponible gratuitementApodex 1.1 MinidefaultDisponible gratuitementvsKAT Coder AIR V2.5mediumMistral Small 4mediumvsNemotron 3.5 LightninghighDisponible gratuitementMistral Small 4nonevsNemotron 3.5 LightninghighDisponible gratuitementNemotron 3.5 LightninghighDisponible gratuitementvsQwen3.6 35B A3BnoneMercury 2.5lowvsNemotron 3.5 LightninghighDisponible gratuitementNemotron 3.5 LightninghighDisponible gratuitementvsLaguna XS 2.1noneDisponible gratuitementMercury 2.5 PreviewlowvsKAT Coder AIR V2.5medium