Navigation
Advertise here

Ember-1 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) mène au score moyen avec 7.1 vs 7.1. Step 3.7 Flash (low) a le coût de benchmark le plus bas avec $0.390 vs $1.798. Step 3.7 Flash (low) est plus rapide avec 17.87s vs 56.77s, avec des taux de réussite de 71.2% vs 63.6%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-28

Modèles comparés

Rang
#158
Total des jetons de sortie
110,125
Temps de réponse (moy.)
56.77s
Coût total
$1.798
Rang
#155
Total des jetons de sortie
320,393
Temps de réponse (moy.)
17.87s
Coût total
$0.390
Modèle recommandé Step 3.7 Flash (low)

Il obtient le meilleur score ici (7.1) tout en coûtant environ 4.6x moins que Ember-1 (high).

Comparaison détaillée

Métrique Ember-1 Ember-1 high Sortie: 2026-09-28 Step 3.7 Flash Step 3.7 Flash low Sortie: 2026-05-29
Score 7.1 7.1
Rang #158 #155
Fiabilité 8.0 10.0
Cohérence 7.3 8.1
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 71.2% 63.6%
Tests instables 7 5
Exécutions totales 66 66
Coût par résultat 14.981 3.539
Coût total $1.798 $0.390
Prix d'entrée $3.000 / 1M $0.200 / 1M
Prix de sortie $15.000 / 1M $1.150 / 1M
Total des jetons d'entrée 48,577 103,842
Jetons de sortie 7,345 320,393
Jetons de raisonnement 102,780 0
Temps de réponse (moy.) 56.77s 17.87s
Temps de réponse (max) 255.06s 124.75s
Temps de réponse (total) 1248.88s 393.04s
Paramètres ~2.8T au total (~104B actifs) 198B au total (11B actifs)
Disponibilité Source fermée Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
Coût
$0.038
Temps
55.1s
Tokens
2,671 tok

#155 Step 3.7 Flash

low
SVG invalide
Coût
$0.004
Temps
25.3s
Tokens
3,072 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Comparaison rapide

Changer la paire de comparaison

Ember-1highvsGrok 4.3mediumEmber-1highvsGPT-5.6 SolnoneEmber-1highvsGPT-6 LunalowQwen3.5-122B-A10BmediumvsStep 3.7 FlashlowStep 3.7 FlashlowvsSolar Pro 4highDeepSeek V3.2mediumvsEmber-1highMuse Glimmer 30BmediumvsStep 3.7 FlashlowMercury 2.5highvsStep 3.7 FlashlowEmber-1highvsGLM 5.1mediumEmber-1highvsGPT-5.5noneEmber-1highvsMercury 2mediumQwen3.5 Plus 2026-04-20mediumvsStep 3.7 Flashlow