AI BENCHY
Advertise here
#107

North Mini Code

Cohere Releasedatum: 2026-06-18 Getest op: 2026-06-18 09:44 cohere/north-mini-code::medium
(medium) (none)

Samenvatting

North Mini Code scoort 5.8 op AI BENCHY en staat op #107. Het model heeft 8.5 betrouwbaarheid, een slagingspercentage van 50.8%, $0.000 totale kosten en 106.18s gemiddelde responstijd.

Wat North Mini Code uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het gebruikt ongewoon veel redeneertokens, wat tragere of duurdere runs kan verklaren.

Score

5.8

Consistentie

8.5

Totaal aantal uitvoer-tokens

1,446,261

Totaal aantal invoer-tokens

32,891

Invoerprijs

$0.000 / 1M

Uitvoerprijs

$0.000 / 1M

Correcte tests

Foute tests: 12

Slaagpercentage per poging: 50.8%

Benchmarkdekking: 21/21 tests · 55/63 pogingen

Instabiele tests

4

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

106.18s

Responstijd (max): 357.05s

Responstijd (totaal): 2229.70s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 North Mini Code

medium
Kosten
$0.000
Tijd
51.8s
Tokens
12,460 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-07-16 23:46 Nieuwe test toegevoegd 5.9 8.6 $0.000 Vergelijken
2026-06-18 09:44 Eerste run 5.8 8.5 $0.000 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-06-18 09:44 · Eerste run21/21 tests · 55/63 pogingen5.88.58.59/2141,446,26132,891$0.000106.18s
2026-07-16 23:46 · Nieuwe test toegevoegd22/22 tests · 58/66 pogingen5.98.58.69/2241,766,80181,813$0.000137.11s
Verschil0.00.0-0.100-320540-48922$0.000-30934ms

De benchmarkdekking verschilt: 21/21 tests · 55/63 pogingen (Doel: 3 herhalingen per test) tegenover 22/22 tests · 58/66 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Prijsgeschiedenis

Historische prijsgegevens voor dit model van OpenRouter.

Datum Invoerprijs Uitvoerprijs
2026-06-18 09:34 $0.000 / 1M $0.000 / 1M

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.4 10.0
Programmeren 4.5 4.9
Gecombineerd 2.8 1.6
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 5.3 7.2
Algemene intelligentie 5.1 10.0
Instructies opvolgen 9.8 10.0
Puzzeloplossing 3.3 10.0
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen