Navigatie
AI BENCHY
Advertise here

Mercury 2.5 Preview (low) vs Nemotron 3.5 Lightning (medium)

Nemotron 3.5 Lightning (medium) leidt in gemiddelde score met 5.1 vs 5.0. Mercury 2.5 Preview (low) heeft lagere benchmarkkosten met $0.011 vs $0.156. Mercury 2.5 Preview (low) is sneller met 1.31s vs 70.11s, met slagingspercentages van 47.0% vs 48.5%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-09-02

Rang
#254
Totaal aantal uitvoer-tokens
31,975
Responstijd (gem.)
1.31s
Totale kosten
$0.011
Rang
#244
Totaal aantal uitvoer-tokens
760,441
Responstijd (gem.)
70.11s
Totale kosten
$0.156
Aanbevolen model Mercury 2.5 Preview (low)

De score blijft dicht bij de beste score hier (5.0 vs 5.1) en het kost ongeveer 15.3x minder dan Nemotron 3.5 Lightning (medium).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview low Releasedatum: 2026-09-02 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Releasedatum: 2026-08-11 Gratis beschikbaar
Score 5.0 5.1
Rang #254 #244
Betrouwbaarheid 10.0 9.9
Consistentie 7.0 6.0
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 47.0% 48.5%
Instabiele tests 8 11
Totaal runs 66 66
Kosten per resultaat 0.169 0.000
Totale kosten $0.011 $0.156
Invoerprijs $0.040 / 1M $0.080 / 1M
Uitvoerprijs $0.150 / 1M $0.200 / 1M
Totaal aantal invoer-tokens 133,525 126,330
Uitvoer-tokens 7,259 165,702
Redeneer-tokens 24,716 594,739
Responstijd (gem.) 1.31s 70.11s
Responstijd (max) 7.29s 437.11s
Responstijd (totaal) 28.77s 1542.52s
Parameters ~100B 30B totaal (3B actief)
Beschikbaarheid Gesloten broncode Gewichten beschikbaar

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Mercury 2.5 Preview

low
Kosten
$0.001
Tijd
1.5s
Tokens
1,169 tok

#244 Nemotron 3.5 Lightning

medium
Kosten
$0.000
Tijd
130.5s
Tokens
6,750 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 5.5 10.0 33.3% 0 972ms 7,794 695 2,263
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

Snelle vergelijking

Vergelijkingspaar wisselen