Navigare
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) conduce la scorul mediu cu 4.6 vs 4.4. Mercury 2 are costul de benchmark mai mic, $0.033 vs $0.117. Mercury 2 este mai rapid cu 1.18s vs 83.19s, cu rate de reușită de 23.2% vs 40.6%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#338
Total tokenuri de ieșire
9,709
Timp de răspuns (mediu)
1.18s
Cost total
$0.033
Rang
#325
Total tokenuri de ieșire
670,615
Timp de răspuns (mediu)
83.19s
Cost total
$0.117
Model recomandat Mercury 2

Scorul rămâne aproape de cel mai bun scor de aici (4.4 vs 4.6) și costă de aproximativ 3.6x mai puțin decât Nemotron 3.5 Lightning (low).

Comparație detaliată

Metrică Mercury 2 Mercury 2 none Lansare: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Lansare: 2026-08-11 Disponibil gratuit
Scor 4.4 4.6
Rang #338 #325
Fiabilitate 10.0 9.5
Consistență 9.2 6.8
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 23.2% 40.6%
Teste instabile 2 9
Rulări totale 69 69
Cost per rezultat 0.812 0.000
Cost total $0.033 $0.117
Preț de intrare $0.250 / 1M $0.060 / 1M
Preț de ieșire $0.750 / 1M $0.160 / 1M
Total tokenuri de intrare 100,634 207,883
Tokenuri de ieșire 9,709 144,718
Tokenuri de raționament 0 525,897
Timp de răspuns (mediu) 1.18s 83.19s
Timp de răspuns (maxim) 9.00s 597.61s
Timp de răspuns (total) 27.14s 1913.41s
Parametri ~100B 30B în total (3B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#338 Mercury 2

none
Cost
$0.002
Timp
1.8s
Tokenuri
1,514 tok

#325 Nemotron 3.5 Lightning

low
Cost
$0.000
Timp
32.2s
Tokenuri
6,089 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

Comparație rapidă

Schimbă perechea de comparație