Navigare
Advertise here

Ember-1 vs Granite 4.2 8B (medium)

Scorul mediu este practic egal la 5.2 vs 5.2. Granite 4.2 8B (medium) are costul de benchmark mai mic, $0.008 vs $0.123. Ember-1 este mai rapid cu 19.46s vs 45.97s, cu rate de reușită de 42.4% vs 34.9%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-28

Modele comparate

Rang
#297
Total tokenuri de ieșire
2,664
Timp de răspuns (mediu)
19.46s
Cost total
$0.123
Rang
#298
Total tokenuri de ieșire
19,330
Timp de răspuns (mediu)
45.97s
Cost total
$0.008
Model recomandat Granite 4.2 8B (medium)

Are cel mai bun scor aici (5.2) și costă de aproximativ 15.3x mai puțin decât Ember-1.

Comparație detaliată

Metrică Ember-1 Ember-1 none Lansare: 2026-09-28 Granite 4.2 8B Granite 4.2 8B medium Lansare: 2026-09-02
Scor 5.2 5.2
Rang #297 #298
Fiabilitate 8.1 8.7
Consistență 8.9 9.6
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 42.4% 34.9%
Teste instabile 3 1
Rulări totale 66 66
Cost per rezultat 1.528 0.117
Cost total $0.123 $0.008
Preț de intrare $3.000 / 1M $0.060 / 1M
Preț de ieșire $15.000 / 1M $0.250 / 1M
Total tokenuri de intrare 27,426 52,909
Tokenuri de ieșire 2,664 7,058
Tokenuri de raționament 0 12,272
Timp de răspuns (mediu) 19.46s 45.97s
Timp de răspuns (maxim) 93.12s 557.96s
Timp de răspuns (total) 428.04s 1011.42s
Parametri ~2.8T în total (~104B activi) 8B
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#297 Ember-1

none
Cost
$0.156
Timp
224.6s
Tokenuri
10,555 tok

#298 IBM: Granite 4.2 8B

medium
Provider returned error
Cost
$0.000
Timp
0.2s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0
Granite 4.2 8B 5.5 10.0 33.3% 0 12.09s 8,439 2,445 3,900

Comparație rapidă

Schimbă perechea de comparație