Navigare
Advertise here

Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) conduce la scorul mediu cu 5.2 vs 5.1. Mercury 2.5 (low) are costul de benchmark mai mic, $0.020 vs $0.111. Mercury 2.5 (low) este mai rapid cu 3.34s vs 77.08s, cu rate de reușită de 37.7% vs 47.8%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#293
Total tokenuri de ieșire
40,302
Timp de răspuns (mediu)
3.34s
Cost total
$0.020
Rang
#287
Total tokenuri de ieșire
659,693
Timp de răspuns (mediu)
77.08s
Cost total
$0.111
Model recomandat Mercury 2.5 (low)

Scorul rămâne aproape de cel mai bun scor de aici (5.1 vs 5.2) și costă de aproximativ 5.8x mai puțin decât Nemotron 3.5 Lightning (high).

Comparație detaliată

Metrică Mercury 2.5 Mercury 2.5 low Lansare: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Lansare: 2026-08-11 Disponibil gratuit
Scor 5.1 5.2
Rang #293 #287
Fiabilitate 9.8 9.6
Consistență 8.2 5.7
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 37.7% 47.8%
Teste instabile 5 12
Rulări totale 69 69
Cost per rezultat 0.319 0.000
Cost total $0.020 $0.111
Preț de intrare $0.040 / 1M $0.060 / 1M
Preț de ieșire $0.150 / 1M $0.160 / 1M
Total tokenuri de intrare 326,083 170,517
Tokenuri de ieșire 7,224 149,968
Tokenuri de raționament 33,078 509,725
Timp de răspuns (mediu) 3.34s 77.08s
Timp de răspuns (maxim) 47.06s 490.99s
Timp de răspuns (total) 76.80s 1772.78s
Parametri ~100B 30B în total (3B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 Mercury 2.5

low
Cost
$0.001
Timp
2.4s
Tokenuri
1,236 tok

#287 Nemotron 3.5 Lightning

high
Cost
$0.000
Timp
92.8s
Tokenuri
11,343 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Comparație rapidă

Schimbă perechea de comparație