Navigare
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Ember-1 (max) vs Step 3.5 Flash (medium)

Scorul mediu este practic egal la 5.9 vs 5.9. Step 3.5 Flash (medium) are costul de benchmark mai mic, $0.132 vs $2.792. Ember-1 (max) este mai rapid cu 98.92s vs 191.63s, cu rate de reușită de 57.6% vs 50.0%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-28

Modele comparate

Rang
#248
Total tokenuri de ieșire
180,806
Timp de răspuns (mediu)
98.92s
Cost total
$2.792
Rang
#245
Total tokenuri de ieșire
568,536
Timp de răspuns (mediu)
191.63s
Cost total
$0.132
Model recomandat Step 3.5 Flash (medium)

Are cel mai bun scor aici (5.9) și costă de aproximativ 21.3x mai puțin decât Ember-1 (max).

Comparație detaliată

Metrică Ember-1 Ember-1 max Lansare: 2026-09-28 Step 3.5 Flash Step 3.5 Flash medium Lansare: 2026-02-01
Scor 5.9 5.9
Rang #248 #245
Fiabilitate 7.5 10.0
Consistență 7.7 8.6
Încercări 66/66 63/66
Teste corecte
Rată de trecere pe încercare 57.6% 50.0%
Teste instabile 6 2
Rulări totale 66 63
Cost per rezultat 27.915 0.858
Cost total $2.792 $0.132
Preț de intrare $3.000 / 1M $0.100 / 1M
Preț de ieșire $15.000 / 1M $0.300 / 1M
Total tokenuri de intrare 26,449 65,716
Tokenuri de ieșire 4,183 189,424
Tokenuri de raționament 176,623 379,112
Timp de răspuns (mediu) 98.92s 191.63s
Timp de răspuns (maxim) 587.08s 1597.85s
Timp de răspuns (total) 2176.20s 3066.07s
Parametri ~2.8T în total (~104B activi) 196B în total (11B activi)
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
Cost
$0.163
Timp
229.4s
Tokenuri
11,002 tok

#245 Step 3.5 Flash

medium
Cost
$0.008
Timp
277.1s
Tokenuri
23,695 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

Comparație rapidă

Schimbă perechea de comparație