- Rang
- #259
- Total des jetons de sortie
- 82,585
- Temps de réponse (moy.)
- 3.51s
- Coût total
- $0.018
Mercury 2.5 Preview vs Nemotron 3.5 Lightning (low)
Mercury 2.5 Preview mène au score moyen avec 4.9 vs 4.8. Mercury 2.5 Preview a le coût de benchmark le plus bas avec $0.018 vs $0.140. Mercury 2.5 Preview est plus rapide avec 3.51s vs 59.81s, avec des taux de réussite de 30.3% vs 42.4%.
- Rang
- #264
- Total des jetons de sortie
- 665,174
- Temps de réponse (moy.)
- 59.81s
- Coût total
- $0.140
Modèle recommandé
Mercury 2.5 Preview
Il obtient le meilleur score ici (4.9) tout en coûtant environ 7.9x moins que Nemotron 3.5 Lightning (low).
Comparaison détaillée
| Métrique | Mercury 2.5 Preview Mercury 2.5 Preview none | Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Disponible gratuitement |
|---|---|---|
| Score | 4.9 | 4.8 |
| Rang | #259 | #264 |
| Fiabilité | 10.0 | 9.8 |
| Cohérence | 8.3 | 6.8 |
| Tentatives | 66/66 | 66/66 |
| Tests corrects | ||
| Taux de réussite par tentative | 30.3% | 42.4% |
| Tests instables | 5 | 9 |
| Exécutions totales | 66 | 66 |
| Coût par résultat | 0.440 | 0.000 |
| Coût total | $0.018 | $0.140 |
| Prix d'entrée | $0.040 / 1M | $0.080 / 1M |
| Prix de sortie | $0.150 / 1M | $0.200 / 1M |
| Total des jetons d'entrée | 130,296 | 138,792 |
| Jetons de sortie | 82,585 | 142,972 |
| Jetons de raisonnement | 0 | 522,202 |
| Temps de réponse (moy.) | 3.51s | 59.81s |
| Temps de réponse (max) | 60.70s | 312.21s |
| Temps de réponse (total) | 77.28s | 1315.80s |
| Paramètres | ~100B | 30B au total (3B actifs) |
| Disponibilité | Source fermée | Poids disponibles |
Génération showcase de modèles
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#259 Mercury 2.5 Preview
none
SVG invalide
- Coût
- $0.001
- Temps
- 3.3s
- Tokens
- 3,122 tok
#264 Nemotron 3.5 Lightning
low- Coût
- $0.000
- Temps
- 32.2s
- Tokens
- 6,089 tok
Meilleurs modèles par score
Score vs coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Répartition par catégorie
| Astuces anti-IA | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.8 | 8.3 | 16.7% | 1 | 655ms | 812 | 256 | 0 | |
| Nemotron 3.5 Lightning | 6.9 | 5.8 | 75.0% | 2 | 14.82s | 696 | 2,231 | 13,263 |
| Programmation | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 4.7 | 7.9 | 22.2% | 1 | 459ms | 7,850 | 650 | 0 | |
| Nemotron 3.5 Lightning | 4.0 | 7.8 | 11.1% | 1 | 224.42s | 7,522 | 72,614 | 262,558 |
| Combiné | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 31.28s | 101,129 | 80,273 | 0 | |
| Nemotron 3.5 Lightning | 6.3 | 10.0 | 50.0% | 0 | 142.36s | 111,134 | 17,771 | 117,066 |
| Analyse et extraction des données | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 5.8 | 66.7% | 1 | 1.04s | 8,333 | 672 | 0 | |
| Nemotron 3.5 Lightning | 2.9 | 5.8 | 16.7% | 1 | 31.32s | 7,944 | 3,462 | 17,930 |
| Spécifique au domaine | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.6 | 7.2 | 22.2% | 1 | 631ms | 875 | 40 | 0 | |
| Nemotron 3.5 Lightning | 3.6 | 7.2 | 22.2% | 1 | 52.66s | 798 | 40,719 | 74,528 |
| Intelligence générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.0 | 10.0 | 0.0% | 0 | 482ms | 544 | 85 | 0 | |
| Nemotron 3.5 Lightning | 3.7 | 9.5 | 0.0% | 0 | 4.61s | 516 | 2,794 | 2,933 |
| Suivi des instructions | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 10.0 | 50.0% | 0 | 1.26s | 753 | 73 | 0 | |
| Nemotron 3.5 Lightning | 8.4 | 6.9 | 83.3% | 1 | 5.46s | 723 | 434 | 4,423 |
| Résolution d'énigmes | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.6 | 7.4 | 44.4% | 1 | 684ms | 796 | 292 | 0 | |
| Nemotron 3.5 Lightning | 3.6 | 1.8 | 44.4% | 3 | 6.21s | 726 | 1,402 | 11,841 |
| Appel d'outils | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.29s | 8,969 | 229 | 0 | |
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 5.08s | 8,526 | 124 | 2,685 |
| Culture générale | Score | Cohérence | Taux de réussite par tentative | Tests instables | Tests corrects | Temps de réponse (moy.) | Jetons d'entrée | Jetons de sortie | Jetons de raisonnement |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 419ms | 235 | 15 | 0 | |
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 38.68s | 207 | 1,421 | 14,975 |
Comparaison rapide
Changer la paire de comparaison
Ring-2.6-1TnonevsNemotron 3.5 LightninglowDisponible gratuitementNemotron 3.5 LightninglowDisponible gratuitementvsHy4 previewnoneNemotron 3.5 LightninglowDisponible gratuitementvsGPT-5.4 NanononeTrinity Large ThinkinghighvsNemotron 3.5 LightninglowDisponible gratuitementLing-2.6-flashnonevsNemotron 3.5 LightninglowDisponible gratuitementKAT-Coder-Air V2.5nonevsNemotron 3.5 LightninglowDisponible gratuitementNemotron 3.5 LightninglowDisponible gratuitementvsGLM 4.7 FlashnoneTrinity Large PreviewnonevsNemotron 3.5 LightninglowDisponible gratuitementMercury 2.5 PreviewnonevsLaguna S 2.1lowDisponible gratuitementMercury 2.5 PreviewnonevsMiniMax M2.7mediumTrinity Large ThinkinghighvsMercury 2.5 PreviewnoneNemotron 3.5 LightninglowDisponible gratuitementvsGPT-4o-mininone