Navigatie
Advertise here

Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) leidt in gemiddelde score met 5.2 vs 5.1. Mercury 2.5 (low) heeft lagere benchmarkkosten met $0.020 vs $0.111. Mercury 2.5 (low) is sneller met 3.34s vs 77.08s, met slagingspercentages van 37.7% vs 47.8%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-10-01

Vergeleken modellen

Rang
#293
Totaal aantal uitvoer-tokens
40,302
Responstijd (gem.)
3.34s
Totale kosten
$0.020
Rang
#287
Totaal aantal uitvoer-tokens
659,693
Responstijd (gem.)
77.08s
Totale kosten
$0.111
Aanbevolen model Mercury 2.5 (low)

De score blijft dicht bij de beste score hier (5.1 vs 5.2) en het kost ongeveer 5.8x minder dan Nemotron 3.5 Lightning (high).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Mercury 2.5 low Releasedatum: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Releasedatum: 2026-08-11 Gratis beschikbaar
Score 5.1 5.2
Rang #293 #287
Betrouwbaarheid 9.8 9.6
Consistentie 8.2 5.7
Pogingen 69/69 69/69
Correcte tests
Slaagpercentage per poging 37.7% 47.8%
Instabiele tests 5 12
Totaal runs 69 69
Kosten per resultaat 0.319 0.000
Totale kosten $0.020 $0.111
Invoerprijs $0.040 / 1M $0.060 / 1M
Uitvoerprijs $0.150 / 1M $0.160 / 1M
Totaal aantal invoer-tokens 326,083 170,517
Uitvoer-tokens 7,224 149,968
Redeneer-tokens 33,078 509,725
Responstijd (gem.) 3.34s 77.08s
Responstijd (max) 47.06s 490.99s
Responstijd (totaal) 76.80s 1772.78s
Parameters ~100B 30B totaal (3B actief)
Beschikbaarheid Gesloten broncode Gewichten beschikbaar

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 Mercury 2.5

low
Kosten
$0.001
Tijd
2.4s
Tokens
1,236 tok

#287 Nemotron 3.5 Lightning

high
Kosten
$0.000
Tijd
92.8s
Tokens
11,343 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Snelle vergelijking

Vergelijkingspaar wisselen