Navigation
Advertise here

Ember-1 (max) vs Grok Build 0.1 (medium)

Le score moyen est pratiquement à égalité avec 6.7 vs 6.7. Grok Build 0.1 (medium) a le coût de benchmark le plus bas avec $1.419 vs $3.264. Grok Build 0.1 (medium) est plus rapide avec 55.13s vs 97.34s, avec des taux de réussite de 59.4% vs 58.0%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#181
Total des jetons de sortie
186,901
Temps de réponse (moy.)
97.34s
Coût total
$3.264
Rang
#176
Total des jetons de sortie
529,806
Temps de réponse (moy.)
55.13s
Coût total
$1.419
Modèle recommandé Grok Build 0.1 (medium)

Il obtient le meilleur score ici (6.7) tout en coûtant environ 2.3x moins que Ember-1 (max).

Comparaison détaillée

Métrique Ember-1 Ember-1 max Sortie: 2026-09-28 Grok Build 0.1 Grok Build 0.1 medium Sortie: 2026-05-21
Score 6.7 6.7
Rang #181 #176
Fiabilité 8.3 10.0
Cohérence 7.8 9.6
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 59.4% 58.0%
Tests instables 6 1
Exécutions totales 69 69
Coût par résultat 29.671 10.910
Coût total $3.264 $1.419
Prix d'entrée $3.000 / 1M $1.000 / 1M
Prix de sortie $15.000 / 1M $2.000 / 1M
Total des jetons d'entrée 153,399 358,616
Jetons de sortie 7,803 9,651
Jetons de raisonnement 179,098 520,155
Temps de réponse (moy.) 97.34s 55.13s
Temps de réponse (max) 587.08s 252.69s
Temps de réponse (total) 2238.73s 1268.10s
Paramètres ~2.8T au total (~104B actifs) ~300B au total (~30B actifs)
Disponibilité Source fermée Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#181 Ember-1

max
Coût
$0.163
Temps
229.4s
Tokens
11,002 tok

#176 SpaceXAI: Grok Build 0.1

medium
Coût
$0.028
Temps
81.3s
Tokens
14,009 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
Grok Build 0.1 5.7 9.7 33.3% 0 108.46s 8,304 1,138 161,452

Comparaison rapide

Changer la paire de comparaison