AI BENCHY
Advertise here

#56

Nemotron 3 Super

NVIDIA Releasedatum: 2026-03-11 Getest op: 2026-04-20 17:48 nvidia/nemotron-3-super-120b-a12b::medium
(medium) (none)

Score

6.7

Consistentie

8.7

Betrouwbaarheid

n.v.t.

Totale kosten

$0.000

Totaal aantal uitvoer-tokens

41,715

Invoerprijs

$0.090 / 1M

Uitvoerprijs

$0.450 / 1M

Correcte tests

Foute tests: 9

Slaagpercentage per poging: 55.6%

Instabiele tests

3

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

19.06s

Responstijd (max): 87.80s

Responstijd (totaal): 305.04s

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-05-22 00:27 Suite gewijzigd 5.9 10.0 $0.001 Vergelijken
2026-05-08 15:31 Suite gewijzigd 6.1 10.0 $0.001 Vergelijken
2026-04-20 17:48 Eerste geregistreerde run 6.7 n.v.t. $0.000 Huidige run

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotale kostenResponstijd (gem.)
2026-04-20 17:48 · Eerste geregistreerde run6.78.7n.v.t.9/18341,715$0.00019.06s
2026-05-22 00:27 · Suite gewijzigd5.98.810.08/20344,978$0.00121.15s
Verschil+0.8-0.1+10-3263-$0.001-2084ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 10.0 10.0
Programmeren 3.0 10.0
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 2.9 4.4
Algemene intelligentie 3.8 9.9
Instructies opvolgen 7.2 6.5
Puzzeloplossing 3.5 9.8
Toolaanroepen 10.0 10.0

Vergeleken modellen