Navigation
Advertise here

Ember-1 vs Granite 4.2 8B (low)

Le score moyen est pratiquement à égalité avec 5.4 vs 5.3. Granite 4.2 8B (low) a le coût de benchmark le plus bas avec $0.036 vs $0.786. Ember-1 est plus rapide avec 22.65s vs 58.20s, avec des taux de réussite de 43.5% vs 33.3%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-11-13

Modèles comparés

Rang
#375
Total des jetons de sortie
11,832
Temps de réponse (moy.)
22.65s
Coût total
$0.786
Rang
#378
Total des jetons de sortie
61,249
Temps de réponse (moy.)
58.20s
Coût total
$0.036
Modèle recommandé Granite 4.2 8B (low)

Il obtient le meilleur score ici (5.3) tout en coûtant environ 22.1x moins que Ember-1.

Comparaison détaillée

Métrique Ember-1 Ember-1 none Sortie: 2026-09-28 Granite 4.2 8B Granite 4.2 8B low Sortie: 2026-09-02
Score 5.4 5.3
Rang #375 #378
Fiabilité 8.8 9.2
Cohérence 8.6 9.7
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 43.5% 33.3%
Tests instables 4 1
Exécutions totales 69 69
Coût par résultat 9.817 0.508
Coût total $0.786 $0.036
Prix d'entrée $3.000 / 1M $0.060 / 1M
Prix de sortie $15.000 / 1M $0.250 / 1M
Prix de lecture du cache $0.300 / 1M $0.015 / 1M
Prix d’écriture du cache N/D N/D
Total des jetons d'entrée 202,617 332,917
Jetons de sortie 11,832 18,989
Jetons de raisonnement 0 42,362
Temps de réponse (moy.) 22.65s 58.20s
Temps de réponse (max) 93.12s 566.80s
Temps de réponse (total) 520.91s 1338.65s
Paramètres ~2.8T au total (~104B actifs) 8B
Disponibilité Source fermée Open source

Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#375 Ember-1

none
Coût
$0.156
Temps
224.6s
Tokens
10,555 tok

#378 IBM: Granite 4.2 8B

low
Provider returned error
Coût
$0.000
Temps
0.2s
Tokens
0 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0
Granite 4.2 8B 5.5 10.0 33.3% 0 13.01s 8,439 2,469 2,984

Changer la paire de comparaison