Navigare
Advertise here

Ember-1 (low) vs Grok Build 0.1 (medium)

Scorul mediu este practic egal la 7.5 vs 7.5. Ember-1 (low) are costul de benchmark mai mic, $0.662 vs $1.130. Ember-1 (low) este mai rapid cu 30.98s vs 54.50s, cu rate de reușită de 66.7% vs 60.6%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-28

Modele comparate

Rang
#120
Total tokenuri de ieșire
37,467
Timp de răspuns (mediu)
30.98s
Cost total
$0.662
Rang
#127
Total tokenuri de ieșire
511,406
Timp de răspuns (mediu)
54.50s
Cost total
$1.130
Model recomandat Ember-1 (low)

Are cel mai bun scor aici (7.5) și costă de aproximativ 1.7x mai puțin decât Grok Build 0.1 (medium).

Comparație detaliată

Metrică Ember-1 Ember-1 low Lansare: 2026-09-28 Grok Build 0.1 Grok Build 0.1 medium Lansare: 2026-05-21
Scor 7.5 7.5
Rang #120 #127
Fiabilitate 8.1 10.0
Consistență 8.5 9.6
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 66.7% 60.6%
Teste instabile 4 1
Rulări totale 66 66
Cost per rezultat 5.085 8.691
Cost total $0.662 $1.130
Preț de intrare $3.000 / 1M $1.000 / 1M
Preț de ieșire $15.000 / 1M $2.000 / 1M
Total tokenuri de intrare 33,011 106,946
Tokenuri de ieșire 4,780 7,993
Tokenuri de raționament 32,687 503,413
Timp de răspuns (mediu) 30.98s 54.50s
Timp de răspuns (maxim) 93.10s 252.69s
Timp de răspuns (total) 681.50s 1199.07s
Parametri ~2.8T în total (~104B activi) ~300B în total (~30B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#120 Ember-1

low
Cost
$0.016
Timp
24.2s
Tokenuri
1,165 tok

#127 SpaceXAI: Grok Build 0.1

medium
Cost
$0.028
Timp
81.3s
Tokenuri
14,009 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Ember-1 10.0 10.0 100.0% 0 37.91s 8,097 2,518 13,142
Grok Build 0.1 5.7 9.7 33.3% 0 108.46s 8,304 1,138 161,452

Comparație rapidă

Schimbă perechea de comparație