Navigare
AI BENCHY
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) conduce la scorul mediu cu 4.8 vs 4.7. Mercury 2 are costul de benchmark mai mic, $0.030 vs $0.175. Mercury 2 este mai rapid cu 825ms vs 59.81s, cu rate de reușită de 24.2% vs 42.4%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-08-15

Rang
#259
Total tokenuri de ieșire
9,584
Timp de răspuns (mediu)
825ms
Cost total
$0.030
Rang
#248
Total tokenuri de ieșire
665,174
Timp de răspuns (mediu)
59.81s
Cost total
$0.175
Model recomandat Mercury 2

Scorul rămâne aproape de cel mai bun scor de aici (4.7 vs 4.8) și costă de aproximativ 5.9x mai puțin decât Nemotron 3.5 Lightning (low).

Comparație detaliată

Metrică Mercury 2 Mercury 2 none Lansare: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Lansare: 2026-08-11 Disponibil gratuit
Scor 4.7 4.8
Rang #259 #248
Fiabilitate 10.0 9.8
Consistență 9.2 6.8
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 24.2% 42.4%
Teste instabile 2 9
Rulări totale 66 66
Cost per rezultat 0.740 0.000
Cost total $0.030 $0.175
Preț de intrare $0.250 / 1M $0.100 / 1M
Preț de ieșire $0.750 / 1M $0.250 / 1M
Total tokenuri de intrare 89,637 138,792
Tokenuri de ieșire 9,584 142,972
Tokenuri de raționament 0 522,202
Timp de răspuns (mediu) 825ms 59.81s
Timp de răspuns (maxim) 4.52s 312.21s
Timp de răspuns (total) 18.14s 1315.80s
Parametri ~100B 30B în total (3B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2

none
Cost
$0.002
Timp
1.8s
Tokenuri
1,514 tok

#248 Nemotron 3.5 Lightning

low
Cost
$0.000
Timp
32.2s
Tokenuri
6,089 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

Comparație rapidă

Schimbă perechea de comparație