Navigare
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (medium)

Nemotron 3.5 Lightning (medium) conduce la scorul mediu cu 4.7 vs 4.4. Mercury 2 are costul de benchmark mai mic, $0.033 vs $0.129. Mercury 2 este mai rapid cu 1.18s vs 81.93s, cu rate de reușită de 23.2% vs 47.8%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#338
Total tokenuri de ieșire
9,709
Timp de răspuns (mediu)
1.18s
Cost total
$0.033
Rang
#315
Total tokenuri de ieșire
766,130
Timp de răspuns (mediu)
81.93s
Cost total
$0.129
Model recomandat Mercury 2

Scorul rămâne aproape de cel mai bun scor de aici (4.4 vs 4.7) și costă de aproximativ 4.0x mai puțin decât Nemotron 3.5 Lightning (medium).

Comparație detaliată

Metrică Mercury 2 Mercury 2 none Lansare: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Lansare: 2026-08-11 Disponibil gratuit
Scor 4.4 4.7
Rang #338 #315
Fiabilitate 10.0 9.8
Consistență 9.2 5.8
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 23.2% 47.8%
Teste instabile 2 12
Rulări totale 69 69
Cost per rezultat 0.812 0.000
Cost total $0.033 $0.129
Preț de intrare $0.250 / 1M $0.060 / 1M
Preț de ieșire $0.750 / 1M $0.160 / 1M
Total tokenuri de intrare 100,634 195,780
Tokenuri de ieșire 9,709 167,746
Tokenuri de raționament 0 598,384
Timp de răspuns (mediu) 1.18s 81.93s
Timp de răspuns (maxim) 9.00s 437.11s
Timp de răspuns (total) 27.14s 1884.31s
Parametri ~100B 30B în total (3B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#338 Mercury 2

none
Cost
$0.002
Timp
1.8s
Tokenuri
1,514 tok

#315 Nemotron 3.5 Lightning

medium
Cost
$0.000
Timp
130.5s
Tokenuri
6,750 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

Comparație rapidă

Schimbă perechea de comparație