Navigation
Advertise here

Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) mène au score moyen avec 5.2 vs 5.1. Mercury 2.5 (low) a le coût de benchmark le plus bas avec $0.020 vs $0.111. Mercury 2.5 (low) est plus rapide avec 3.34s vs 77.08s, avec des taux de réussite de 37.7% vs 47.8%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#293
Total des jetons de sortie
40,302
Temps de réponse (moy.)
3.34s
Coût total
$0.020
Rang
#287
Total des jetons de sortie
659,693
Temps de réponse (moy.)
77.08s
Coût total
$0.111
Modèle recommandé Mercury 2.5 (low)

Son score reste proche du meilleur score ici (5.1 vs 5.2) tout en coûtant environ 5.8x moins que Nemotron 3.5 Lightning (high).

Comparaison détaillée

Métrique Mercury 2.5 Mercury 2.5 low Sortie: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Sortie: 2026-08-11 Disponible gratuitement
Score 5.1 5.2
Rang #293 #287
Fiabilité 9.8 9.6
Cohérence 8.2 5.7
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 37.7% 47.8%
Tests instables 5 12
Exécutions totales 69 69
Coût par résultat 0.319 0.000
Coût total $0.020 $0.111
Prix d'entrée $0.040 / 1M $0.060 / 1M
Prix de sortie $0.150 / 1M $0.160 / 1M
Total des jetons d'entrée 326,083 170,517
Jetons de sortie 7,224 149,968
Jetons de raisonnement 33,078 509,725
Temps de réponse (moy.) 3.34s 77.08s
Temps de réponse (max) 47.06s 490.99s
Temps de réponse (total) 76.80s 1772.78s
Paramètres ~100B 30B au total (3B actifs)
Disponibilité Source fermée Poids disponibles

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 Mercury 2.5

low
Coût
$0.001
Temps
2.4s
Tokens
1,236 tok

#287 Nemotron 3.5 Lightning

high
Coût
$0.000
Temps
92.8s
Tokens
11,343 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Comparaison rapide

Changer la paire de comparaison

Mercury 2.5lowvsKAT Coder AIR V2.5mediumMercury 2.5lowvsMiMo-V2.5-PrononeLing 3.0 FlashnonevsNemotron 3.5 LightninghighDisponible gratuitementMercury 2.5lowvsMistral Small 4noneMercury 2.5lowvsMistral Small 4mediumNemotron 3.5 LightninghighDisponible gratuitementvsInkling SmalllowDisponible gratuitementMistral Small 4mediumvsNemotron 3.5 LightninghighDisponible gratuitementMercury 2.5lowvsLaguna S 2.1mediumDisponible gratuitementMistral Small 4nonevsNemotron 3.5 LightninghighDisponible gratuitementMercury 2.5lowvsKAT Coder AIR V2.5highNemotron 3.5 LightninghighDisponible gratuitementvsQwen3.6 35B A3BnoneNemotron 3.5 LightninghighDisponible gratuitementvsLaguna XS 2.1noneDisponible gratuitement