Navigation
AI BENCHY
Advertise here

Mercury 2.5 Preview vs Nemotron 3.5 Lightning (low)

Mercury 2.5 Preview mène au score moyen avec 4.9 vs 4.8. Mercury 2.5 Preview a le coût de benchmark le plus bas avec $0.018 vs $0.140. Mercury 2.5 Preview est plus rapide avec 3.51s vs 59.81s, avec des taux de réussite de 30.3% vs 42.4%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-02

Rang
#259
Total des jetons de sortie
82,585
Temps de réponse (moy.)
3.51s
Coût total
$0.018
Rang
#264
Total des jetons de sortie
665,174
Temps de réponse (moy.)
59.81s
Coût total
$0.140
Modèle recommandé Mercury 2.5 Preview

Il obtient le meilleur score ici (4.9) tout en coûtant environ 7.9x moins que Nemotron 3.5 Lightning (low).

Comparaison détaillée

Métrique Mercury 2.5 Preview Mercury 2.5 Preview none Sortie: 2026-09-02 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Sortie: 2026-08-11 Disponible gratuitement
Score 4.9 4.8
Rang #259 #264
Fiabilité 10.0 9.8
Cohérence 8.3 6.8
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 30.3% 42.4%
Tests instables 5 9
Exécutions totales 66 66
Coût par résultat 0.440 0.000
Coût total $0.018 $0.140
Prix d'entrée $0.040 / 1M $0.080 / 1M
Prix de sortie $0.150 / 1M $0.200 / 1M
Total des jetons d'entrée 130,296 138,792
Jetons de sortie 82,585 142,972
Jetons de raisonnement 0 522,202
Temps de réponse (moy.) 3.51s 59.81s
Temps de réponse (max) 60.70s 312.21s
Temps de réponse (total) 77.28s 1315.80s
Paramètres ~100B 30B au total (3B actifs)
Disponibilité Source fermée Poids disponibles

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
SVG invalide
Coût
$0.001
Temps
3.3s
Tokens
3,122 tok

#264 Nemotron 3.5 Lightning

low
Coût
$0.000
Temps
32.2s
Tokens
6,089 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

Comparaison rapide

Changer la paire de comparaison