Navegación
AI BENCHY
Your ad here

AI BENCHY Compare

IBM: Granite 4.1 8B vs Mistral: Mistral Small 4

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-05-01

Métrica Granite 4.1 8B Granite 4.1 8B none Lanzamiento: 2026-05-01 Mistral Small 4 Mistral Small 4 medium Lanzamiento: 2026-03-16
Puntuación 4.3 5.7
Rango #135 #99
Fiabilidad 10.0 N/D
Consistencia 10.0 6.8
Pruebas correctas
Tasa de aciertos por intento 11.1% 50.0%
Pruebas inestables 0 7
Ejecuciones totales 54 54
Costo por resultado 0.110 0.674
Costo total $0.003 $0.034
Precio de entrada $0.050 / 1M $0.150 / 1M
Precio de salida $0.100 / 1M $0.600 / 1M
Tokens de salida 2,712 15,084
Tokens de razonamiento 0 39,408
Tiempo de respuesta (promedio) 767ms 5.64s
Tiempo de respuesta (máximo) 2.17s 30.49s
Tiempo de respuesta (total) 13.81s 101.52s

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Trucos anti-IA Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 903 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 6.9 10.0 0.0% 0 1.07s 339 0
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Combinado Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 396 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Análisis y extracción de datos Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 195 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Específico del dominio Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 24 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Inteligencia general Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 115 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Seguimiento de instrucciones Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 66 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Resolución de acertijos Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 3.7 10.0 0.0% 0 635ms 431 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Llamada de herramientas Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de salida Tokens de razonamiento
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 243 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Comparación rápida

Cambiar par de comparación