Navigation
AI BENCHY
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) mène au score moyen avec 4.8 vs 4.7. Mercury 2 a le coût de benchmark le plus bas avec $0.030 vs $0.175. Mercury 2 est plus rapide avec 825ms vs 59.81s, avec des taux de réussite de 24.2% vs 42.4%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-08-15

Rang
#259
Total des jetons de sortie
9,584
Temps de réponse (moy.)
825ms
Coût total
$0.030
Rang
#248
Total des jetons de sortie
665,174
Temps de réponse (moy.)
59.81s
Coût total
$0.175
Modèle recommandé Mercury 2

Son score reste proche du meilleur score ici (4.7 vs 4.8) tout en coûtant environ 5.9x moins que Nemotron 3.5 Lightning (low).

Comparaison détaillée

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Sortie: 2026-08-11 Disponible gratuitement
Score 4.7 4.8
Rang #259 #248
Fiabilité 10.0 9.8
Cohérence 9.2 6.8
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 24.2% 42.4%
Tests instables 2 9
Exécutions totales 66 66
Coût par résultat 0.740 0.000
Coût total $0.030 $0.175
Prix d'entrée $0.250 / 1M $0.100 / 1M
Prix de sortie $0.750 / 1M $0.250 / 1M
Total des jetons d'entrée 89,637 138,792
Jetons de sortie 9,584 142,972
Jetons de raisonnement 0 522,202
Temps de réponse (moy.) 825ms 59.81s
Temps de réponse (max) 4.52s 312.21s
Temps de réponse (total) 18.14s 1315.80s
Paramètres ~100B 30B au total (3B actifs)
Disponibilité Source fermée Poids disponibles

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2

none
Coût
$0.002
Temps
1.8s
Tokens
1,514 tok

#248 Nemotron 3.5 Lightning

low
Coût
$0.000
Temps
32.2s
Tokens
6,089 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

Comparaison rapide

Changer la paire de comparaison

Ring-2.6-1TnonevsNemotron 3.5 LightninglowDisponible gratuitementCobuddymediumvsMercury 2noneNemotron 3.5 LightninglowDisponible gratuitementvsGPT-5.4 NanononeTrinity Large ThinkinghighvsNemotron 3.5 LightninglowDisponible gratuitementLing-2.6-flashnonevsNemotron 3.5 LightninglowDisponible gratuitementKAT-Coder-Air V2.5nonevsNemotron 3.5 LightninglowDisponible gratuitementNemotron 3.5 LightninglowDisponible gratuitementvsGLM 4.7 FlashnoneTrinity Large PreviewnonevsNemotron 3.5 LightninglowDisponible gratuitementMercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsMiniMax M2.5mediumTrinity Large ThinkinghighvsMercury 2noneNemotron 3.5 LightninglowDisponible gratuitementvsGPT-4o-mininone