Navigare
Advertise here

North Mini Code (medium) vs Ember-1

Scorul mediu este practic egal la 5.4 vs 5.4. North Mini Code (medium) are costul de benchmark mai mic, $0.000 vs $0.786. Ember-1 este mai rapid cu 22.65s vs 140.39s, cu rate de reușită de 42.0% vs 43.5%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#273
Total tokenuri de ieșire
1,818,271
Timp de răspuns (mediu)
140.39s
Cost total
$0.000
Rang
#277
Total tokenuri de ieșire
11,832
Timp de răspuns (mediu)
22.65s
Cost total
$0.786
Model recomandat Ember-1

Are cel mai bun scor aici (5.4) și răspunde de aproximativ 6.2x mai rapid decât North Mini Code (medium).

Comparație detaliată

Metrică North Mini Code North Mini Code medium Lansare: 2026-06-18 Disponibil gratuit Ember-1 Ember-1 none Lansare: 2026-09-28
Scor 5.4 5.4
Rang #273 #277
Fiabilitate 8.9 8.8
Consistență 8.6 8.6
Încercări 61/69 69/69
Teste corecte
Rată de trecere pe încercare 42.0% 43.5%
Teste instabile 4 4
Rulări totale 61 69
Cost per rezultat 0.000 9.817
Cost total $0.000 $0.786
Preț de intrare $0.000 / 1M $3.000 / 1M
Preț de ieșire $0.000 / 1M $15.000 / 1M
Total tokenuri de intrare 166,347 202,617
Tokenuri de ieșire 423,884 11,832
Tokenuri de raționament 1,394,387 0
Timp de răspuns (mediu) 140.39s 22.65s
Timp de răspuns (maxim) 786.72s 93.12s
Timp de răspuns (total) 3229.07s 520.91s
Parametri 30B în total (3B activi) ~2.8T în total (~104B activi)
Disponibilitate Sursă deschisă Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 North Mini Code

medium
Cost
$0.000
Timp
51.8s
Tokenuri
12,460 tok

#277 Ember-1

none
Cost
$0.156
Timp
224.6s
Tokenuri
10,555 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
North Mini Code 4.5 4.9 33.3% 2 320.43s 7,119 219,891 561,569
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0

Comparație rapidă

Schimbă perechea de comparație