Navigation
Advertise here

Claude Opus 4.8 vs Ember-1 (low)

Ember-1 (low) mène au score moyen avec 7.0 vs 6.9. Ember-1 (low) a le coût de benchmark le plus bas avec $1.488 vs $2.334. Claude Opus 4.8 est plus rapide avec 7.54s vs 34.90s, avec des taux de réussite de 60.9% vs 65.2%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#167
Total des jetons de sortie
24,343
Temps de réponse (moy.)
7.54s
Coût total
$2.334
Rang
#157
Total des jetons de sortie
56,766
Temps de réponse (moy.)
34.90s
Coût total
$1.488
Modèle recommandé Claude Opus 4.8

Son score reste proche du meilleur score ici (6.9 vs 7.0) et il répond environ 4.6x plus vite que Ember-1 (low).

Comparaison détaillée

Métrique Claude Opus 4.8 Claude Opus 4.8 none Sortie: 2026-05-28 Ember-1 Ember-1 low Sortie: 2026-09-28
Score 6.9 7.0
Rang #167 #157
Fiabilité 10.0 8.8
Cohérence 9.3 8.2
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 60.9% 65.2%
Tests instables 2 5
Exécutions totales 69 69
Coût par résultat 17.953 11.441
Coût total $2.334 $1.488
Prix d'entrée $5.000 / 1M $3.000 / 1M
Prix de sortie $25.000 / 1M $15.000 / 1M
Total des jetons d'entrée 345,059 211,908
Jetons de sortie 24,343 14,158
Jetons de raisonnement 0 42,608
Temps de réponse (moy.) 7.54s 34.90s
Temps de réponse (max) 65.07s 121.29s
Temps de réponse (total) 173.31s 802.79s
Paramètres ~5T au total (~500B actifs) ~2.8T au total (~104B actifs)
Disponibilité Source fermée Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#167 Claude Opus 4.8

none
Coût
$0.053
Temps
22.0s
Tokens
2,253 tok

#157 Ember-1

low
Coût
$0.016
Temps
24.2s
Tokens
1,165 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 5.5 10.0 33.3% 0 3.29s 10,590 1,332 0
Ember-1 10.0 10.0 100.0% 0 37.91s 8,097 2,518 13,142

Comparaison rapide

Changer la paire de comparaison