Navegación
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs StepFun: Step 3.5 Flash

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-04-11

Métrica Mistral Small 4 Mistral Small 4 medium Lanzamiento: 2026-03-16 Step 3.5 Flash Step 3.5 Flash none Lanzamiento: 2026-02-01
Puntuación 5.7 3.0
Rango #69 #93
Consistencia 6.8 10.0
Pruebas correctas
Tasa de aciertos por intento 50.0% 0.0%
Pruebas inestables 7 0
Ejecuciones totales 54 3
Costo por resultado 0.674 0.000
Costo total $0.034 $0.000
Precio de entrada $0.150 / 1M $0.100 / 1M
Precio de salida $0.600 / 1M $0.300 / 1M
Tokens de salida 15,084 0
Tokens de razonamiento 39,408 0
Tiempo de respuesta (promedio) 5.64s 0ms
Tiempo de respuesta (máximo) 30.49s 0ms
Tiempo de respuesta (total) 101.52s 0ms

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Trucos anti-IA Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Step 3.5 Flash - - - - - - - -
Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0
Combinado Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Step 3.5 Flash - - - - - - - -
Análisis y extracción de datos Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Step 3.5 Flash - - - - - - - -
Específico del dominio Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Step 3.5 Flash - - - - - - - -
Inteligencia general Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Step 3.5 Flash - - - - - - - -
Seguimiento de instrucciones Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Step 3.5 Flash - - - - - - - -
Resolución de acertijos Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Step 3.5 Flash - - - - - - - -
Llamada de herramientas Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Step 3.5 Flash - - - - - - - -

Comparación rápida

Cambiar par de comparación