Navegación
Advertise here

Ember-1 (max) vs Step 3.5 Flash (medium)

La puntuación media está prácticamente empatada en 5.9 vs 5.9. Step 3.5 Flash (medium) tiene menor coste de benchmark con $0.132 vs $2.792. Ember-1 (max) es más rápido con 98.92s vs 191.63s, con tasas de acierto de 57.6% vs 50.0%.

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-09-28

Modelos comparados

Rango
#248
Total de tokens de salida
180,806
Tiempo de respuesta (promedio)
98.92s
Costo total
$2.792
Rango
#245
Total de tokens de salida
568,536
Tiempo de respuesta (promedio)
191.63s
Costo total
$0.132
Modelo recomendado Step 3.5 Flash (medium)

Tiene la mejor puntuación aquí (5.9) y cuesta aproximadamente 21.3x menos que Ember-1 (max).

Comparación detallada

Métrica Ember-1 Ember-1 max Lanzamiento: 2026-09-28 Step 3.5 Flash Step 3.5 Flash medium Lanzamiento: 2026-02-01
Puntuación 5.9 5.9
Rango #248 #245
Fiabilidad 7.5 10.0
Consistencia 7.7 8.6
Intentos 66/66 63/66
Pruebas correctas
Tasa de aciertos por intento 57.6% 50.0%
Pruebas inestables 6 2
Ejecuciones totales 66 63
Costo por resultado 27.915 0.858
Costo total $2.792 $0.132
Precio de entrada $3.000 / 1M $0.100 / 1M
Precio de salida $15.000 / 1M $0.300 / 1M
Total de tokens de entrada 26,449 65,716
Tokens de salida 4,183 189,424
Tokens de razonamiento 176,623 379,112
Tiempo de respuesta (promedio) 98.92s 191.63s
Tiempo de respuesta (máximo) 587.08s 1597.85s
Tiempo de respuesta (total) 2176.20s 3066.07s
Parámetros ~2.8T en total (~104B activos) 196B en total (11B activos)
Disponibilidad Código cerrado Código abierto

Generación showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
Coste
$0.163
Tiempo
229.4s
Tokens
11,002 tok

#245 Step 3.5 Flash

medium
Coste
$0.008
Tiempo
277.1s
Tokens
23,695 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

Comparación rápida

Cambiar par de comparación