Navigare
Advertise here

Ember-1 (low) vs Qwen3.5-27B (medium)

Scorul mediu este practic egal la 7.5 vs 7.5. Ember-1 (low) are costul de benchmark mai mic, $0.662 vs $0.982. Ember-1 (low) este mai rapid cu 30.98s vs 113.28s, cu rate de reușită de 66.7% vs 75.8%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-28

Modele comparate

Rang
#120
Total tokenuri de ieșire
37,467
Timp de răspuns (mediu)
30.98s
Cost total
$0.662
Rang
#124
Total tokenuri de ieșire
614,909
Timp de răspuns (mediu)
113.28s
Cost total
$0.982
Model recomandat Ember-1 (low)

Are cel mai bun scor aici (7.5) și răspunde de aproximativ 3.7x mai rapid decât Qwen3.5-27B (medium).

Comparație detaliată

Metrică Ember-1 Ember-1 low Lansare: 2026-09-28 Qwen3.5-27B Qwen3.5-27B medium Lansare: 2026-02-24
Scor 7.5 7.5
Rang #120 #124
Fiabilitate 8.1 10.0
Consistență 8.5 7.8
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 66.7% 75.8%
Teste instabile 4 6
Rulări totale 66 66
Cost per rezultat 5.085 8.217
Cost total $0.662 $0.982
Preț de intrare $3.000 / 1M $0.195 / 1M
Preț de ieșire $15.000 / 1M $1.560 / 1M
Total tokenuri de intrare 33,011 111,644
Tokenuri de ieșire 4,780 16,113
Tokenuri de raționament 32,687 598,796
Timp de răspuns (mediu) 30.98s 113.28s
Timp de răspuns (maxim) 93.10s 1026.43s
Timp de răspuns (total) 681.50s 2492.26s
Parametri ~2.8T în total (~104B activi) 27B
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#120 Ember-1

low
Cost
$0.016
Timp
24.2s
Tokenuri
1,165 tok

#124 Qwen3.5-27B

medium
Cost
$0.008
Timp
62.0s
Tokenuri
3,099 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Ember-1 10.0 10.0 100.0% 0 37.91s 8,097 2,518 13,142
Qwen3.5-27B 6.2 7.1 55.6% 1 160.69s 7,895 6,381 89,388

Comparație rapidă

Schimbă perechea de comparație