Navigation
Advertise here

Claude Opus 4.8 vs Ember-1 (high)

Le score moyen est pratiquement à égalité avec 6.9 vs 6.9. Claude Opus 4.8 a le coût de benchmark le plus bas avec $2.334 vs $2.405. Claude Opus 4.8 est plus rapide avec 7.54s vs 58.14s, avec des taux de réussite de 60.9% vs 71.0%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#167
Total des jetons de sortie
24,343
Temps de réponse (moy.)
7.54s
Coût total
$2.334
Rang
#163
Total des jetons de sortie
121,223
Temps de réponse (moy.)
58.14s
Coût total
$2.405
Modèle recommandé Claude Opus 4.8

Il obtient le meilleur score ici (6.9) et répond environ 7.7x plus vite que Ember-1 (high).

Comparaison détaillée

Métrique Claude Opus 4.8 Claude Opus 4.8 none Sortie: 2026-05-28 Ember-1 Ember-1 high Sortie: 2026-09-28
Score 6.9 6.9
Rang #167 #163
Fiabilité 10.0 8.6
Cohérence 9.3 7.2
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 60.9% 71.0%
Tests instables 2 8
Exécutions totales 69 69
Coût par résultat 17.953 20.041
Coût total $2.334 $2.405
Prix d'entrée $5.000 / 1M $3.000 / 1M
Prix de sortie $25.000 / 1M $15.000 / 1M
Total des jetons d'entrée 345,059 195,489
Jetons de sortie 24,343 12,475
Jetons de raisonnement 0 108,748
Temps de réponse (moy.) 7.54s 58.14s
Temps de réponse (max) 65.07s 255.06s
Temps de réponse (total) 173.31s 1337.19s
Paramètres ~5T au total (~500B actifs) ~2.8T au total (~104B actifs)
Disponibilité Source fermée Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#167 Claude Opus 4.8

none
Coût
$0.053
Temps
22.0s
Tokens
2,253 tok

#163 Ember-1

high
Coût
$0.038
Temps
55.1s
Tokens
2,671 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 5.5 10.0 33.3% 0 3.29s 10,590 1,332 0
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093

Comparaison rapide

Changer la paire de comparaison