- Rang
- #232
- Total des jetons de sortie
- 760,441
- Temps de réponse (moy.)
- 70.11s
- Coût total
- $0.195
Nemotron 3.5 Lightning (medium) vs GPT-4o-mini
Nemotron 3.5 Lightning (medium) mène au score moyen avec 5.1 vs 5.0. GPT-4o-mini a le coût de benchmark le plus bas avec $0.010 vs $0.195. GPT-4o-mini est plus rapide avec 1.92s vs 70.11s, avec des taux de réussite de 48.5% vs 22.7%.
- Rang
- #243
- Total des jetons de sortie
- 2,913
- Temps de réponse (moy.)
- 1.92s
- Coût total
- $0.010
Modèle recommandé
GPT-4o-mini
Son score reste proche du meilleur score ici (5.0 vs 5.1) tout en coûtant environ 20.0x moins que Nemotron 3.5 Lightning (medium).
Comparaison détaillée
| Métrique | Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Disponible gratuitement | GPT-4o-mini GPT-4o-mini none |
|---|---|---|
| Score | 5.1 | 5.0 |
| Rang | #232 | #243 |
| Fiabilité | 9.9 | 10.0 |
| Cohérence | 6.0 | 9.9 |
| Tentatives | 66/66 | 66/66 |
| Tests corrects | ||
| Taux de réussite par tentative | 48.5% | 22.7% |
| Tests instables | 11 | 0 |
| Exécutions totales | 66 | 66 |
| Coût par résultat | 0.000 | 0.195 |
| Coût total | $0.195 | $0.010 |
| Prix d'entrée | $0.100 / 1M | $0.150 / 1M |
| Prix de sortie | $0.250 / 1M | $0.600 / 1M |
| Total des jetons d'entrée | 126,330 | 53,145 |
| Jetons de sortie | 165,702 | 2,913 |
| Jetons de raisonnement | 594,739 | 0 |
| Temps de réponse (moy.) | 70.11s | 1.92s |
| Temps de réponse (max) | 437.11s | 7.58s |
| Temps de réponse (total) | 1542.52s | 30.71s |
| Paramètres | 30B au total (3B actifs) | ~8B |
| Disponibilité | Poids disponibles | Source fermée |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#232 Nemotron 3.5 Lightning
medium- Coût
- $0.000
- Temps
- 130.5s
- Tokens
- 6,750 tok
#243 GPT-4o-mini
none- Coût
- $0.001
- Temps
- 6.6s
- Tokens
- 742 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 6.9 | 7.9 | 66.7% | 1 | 12.34s | 696 | 6,904 | 20,862 | |
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 285.47s | 7,623 | 78,065 | 297,359 | |
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 6.2 | 5.8 | 66.7% | 1 | 136.91s | 98,571 | 15,769 | 112,376 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 3.7 | 1.7 | 50.0% | 2 | 23.24s | 7,944 | 4,195 | 30,097 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 74.73s | 798 | 54,657 | 91,174 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 5.5 | 10.0 | 0.0% | 0 | 4.36s | 516 | 3,127 | 3,157 | |
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 3.75s | 723 | 531 | 4,404 | |
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 4.2 | 4.4 | 44.5% | 2 | 10.49s | 726 | 1,170 | 18,195 | |
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 4.92s | 8,526 | 154 | 2,518 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 44.02s | 207 | 1,130 | 14,597 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 |
Comparaison rapide
Changer la paire de comparaison
Mistral Small 4nonevsNemotron 3.5 LightningmediumDisponible gratuitementNemotron 3.5 LightningmediumDisponible gratuitementvsQwen3 Coder NextnoneGPT-4o-mininonevsLaguna S 2.1lowDisponible gratuitementNemotron 3.5 LightningmediumDisponible gratuitementvsMiMo-V2.5noneNemotron 3.5 LightningmediumDisponible gratuitementvsQwen3.5-9BnoneNemotron 3.5 LightningmediumDisponible gratuitementvsInklingnoneDots 3 Note PreviewnoneDisponible gratuitementvsNemotron 3.5 LightningmediumDisponible gratuitementNorth Mini CodenoneDisponible gratuitementvsNemotron 3.5 LightningmediumDisponible gratuitementMiniMax M2.7mediumvsGPT-4o-mininoneNemotron 3.5 LightningmediumDisponible gratuitementvsQwen3.6 35B A3BnoneNemotron 3.5 LightninglowDisponible gratuitementvsGPT-4o-mininoneLing-2.6-1TnonevsNemotron 3.5 LightningmediumDisponible gratuitement