- Rang
- #291
- Total des jetons de sortie
- 136,501
- Temps de réponse (moy.)
- 12.68s
- Coût total
- $0.126
Mistral Small 4 (medium) vs Nemotron 3.5 Lightning (high)
Nemotron 3.5 Lightning (high) mène au score moyen avec 5.2 vs 5.1. Nemotron 3.5 Lightning (high) a le coût de benchmark le plus bas avec $0.111 vs $0.126. Mistral Small 4 (medium) est plus rapide avec 12.68s vs 77.08s, avec des taux de réussite de 42.0% vs 47.8%.
Modèles comparés
- Rang
- #287
- Total des jetons de sortie
- 659,693
- Temps de réponse (moy.)
- 77.08s
- Coût total
- $0.111
Modèle recommandé
Mistral Small 4 (medium)
Son score reste proche du meilleur score ici (5.1 vs 5.2) et il répond environ 6.1x plus vite que Nemotron 3.5 Lightning (high).
Comparaison détaillée
| Métrique | Mistral Small 4 Mistral Small 4 medium | Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Disponible gratuitement |
|---|---|---|
| Score | 5.1 | 5.2 |
| Rang | #291 | #287 |
| Fiabilité | 9.7 | 9.6 |
| Cohérence | 7.1 | 5.7 |
| Tentatives | 69/69 | 69/69 |
| Tests corrects | ||
| Taux de réussite par tentative | 42.0% | 47.8% |
| Tests instables | 8 | 12 |
| Exécutions totales | 69 | 69 |
| Coût par résultat | 2.502 | 0.000 |
| Coût total | $0.126 | $0.111 |
| Prix d'entrée | $0.150 / 1M | $0.060 / 1M |
| Prix de sortie | $0.600 / 1M | $0.160 / 1M |
| Total des jetons d'entrée | 321,955 | 170,517 |
| Jetons de sortie | 41,555 | 149,968 |
| Jetons de raisonnement | 94,946 | 509,725 |
| Temps de réponse (moy.) | 12.68s | 77.08s |
| Temps de réponse (max) | 59.15s | 490.99s |
| Temps de réponse (total) | 291.66s | 1772.78s |
| Paramètres | 119B au total (6B actifs) | 30B au total (3B actifs) |
| Disponibilité | Open source | Poids disponibles |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#291 Mistral Small 4
medium- Coût
- $0.006
- Temps
- 47.9s
- Tokens
- 9,857 tok
#287 Nemotron 3.5 Lightning
high- Coût
- $0.000
- Temps
- 92.8s
- Tokens
- 11,343 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Tâches agentiques | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 5.0 | 10.0 | 0.0% | 0 | 54.05s | 181,396 | 1,287 | 1,617 | |
| Nemotron 3.5 Lightning | 3.5 | 8.3 | 0.0% | 0 | 490.99s | 52,501 | 1,624 | 3,472 |
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 5.6 | 3.8 | 66.7% | 3 | 2.67s | 708 | 4,055 | 4,778 | |
| Nemotron 3.5 Lightning | 5.5 | 3.7 | 66.7% | 3 | 10.29s | 696 | 2,432 | 15,948 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 4.4 | 5.1 | 33.3% | 2 | 39.98s | 7,636 | 11,635 | 54,715 | |
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 168.41s | 7,623 | 68,533 | 242,319 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 32.40s | 116,624 | 17,890 | 18,384 | |
| Nemotron 3.5 Lightning | 6.4 | 10.0 | 50.0% | 0 | 160.45s | 90,257 | 17,550 | 119,725 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 7.3 | 5.9 | 83.3% | 1 | 1.23s | 6,171 | 335 | 723 | |
| Nemotron 3.5 Lightning | 7.3 | 5.9 | 83.3% | 1 | 13.99s | 7,944 | 3,210 | 16,835 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 5.9 | 7.2 | 55.6% | 1 | 6.33s | 807 | 3,427 | 7,871 | |
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 88.61s | 798 | 45,616 | 72,496 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 4.8 | 10.0 | 0.0% | 0 | 2.05s | 519 | 821 | 828 | |
| Nemotron 3.5 Lightning | 3.7 | 9.5 | 0.0% | 0 | 7.58s | 516 | 4,331 | 4,408 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 7.3 | 5.8 | 83.3% | 1 | 1.38s | 729 | 540 | 1,031 | |
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 4.98s | 723 | 502 | 3,779 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.4 | 9.7 | 0.0% | 0 | 2.17s | 735 | 1,226 | 2,632 | |
| Nemotron 3.5 Lightning | 3.6 | 1.8 | 44.4% | 3 | 6.09s | 726 | 1,236 | 9,851 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 3.50s | 6,420 | 321 | 810 | |
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 6.92s | 8,526 | 3,745 | 3,781 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 5.92s | 210 | 18 | 1,557 | |
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 77.98s | 207 | 1,189 | 17,111 |
Comparaison rapide
Changer la paire de comparaison
Ling 3.0 FlashnonevsNemotron 3.5 LightninghighDisponible gratuitementMercury 2.5lowvsMistral Small 4mediumMistral Small 4mediumvsMiMo-V2.5-PrononeNemotron 3.5 LightninghighDisponible gratuitementvsInkling SmalllowDisponible gratuitementKAT Coder AIR V2.5highvsMistral Small 4mediumMistral Small 4nonevsNemotron 3.5 LightninghighDisponible gratuitementLing 3.0 FlashnonevsMistral Small 4mediumNemotron 3.5 LightninghighDisponible gratuitementvsQwen3.6 35B A3BnoneMercury 2.5lowvsNemotron 3.5 LightninghighDisponible gratuitementNemotron 3.5 LightninghighDisponible gratuitementvsLaguna XS 2.1noneDisponible gratuitementKAT Coder AIR V2.5mediumvsNemotron 3.5 LightninghighDisponible gratuitementNemotron 3.5 LightninghighDisponible gratuitementvsMiMo-V2.5-Pronone