AI BENCHY Compare

Google: Gemma 4 26B A4B vs Mistral: Mistral Small 4

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-04-04

Métrica	Gemma 4 26B A4B Gemma 4 26B A4B none Lanzamiento: 2026-04-03	Mistral Small 4 Mistral Small 4 medium Lanzamiento: 2026-03-16

Métrica	Gemma 4 26B A4B Gemma 4 26B A4B none Lanzamiento: 2026-04-03	Mistral Small 4 Mistral Small 4 medium Lanzamiento: 2026-03-16
Puntuación	6.3	5.6
Rango	#53	#68
Consistencia	9.1	7.0
Pruebas correctas
Tasa de aciertos por intento	47.1%	49.0%
Pruebas inestables	2	6
Ejecuciones totales	51	51
Costo por resultado	0.068	0.502
Costo total	$0.005	$0.026
Precio de entrada	$0.130 / 1M	$0.150 / 1M
Precio de salida	$0.400 / 1M	$0.600 / 1M
Tokens de salida	1,335	12,288
Tokens de razonamiento	0	28,112
Tiempo de respuesta (promedio)	6.56s	4.18s
Tiempo de respuesta (máximo)	57.10s	25.25s
Tiempo de respuesta (total)	111.54s	71.03s

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Trucos anti-IA	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	8.3	10.0	75.0%	0		1.28s	230	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778

Combinado	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	3.0	10.0	0.0%	0		30.53s	309	0
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700

Análisis y extracción de datos	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	10.0	10.0	100.0%	0		1.70s	285	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723

Específico del dominio	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	3.6	7.2	22.2%	1		2.49s	27	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904

Inteligencia general	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	4.0	10.0	0.0%	0		3.54s	85	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828

Seguimiento de instrucciones	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	4.4	6.9	16.7%	1		1.08s	75	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031

Puzzle Solving	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	5.7	10.0	33.3%	0		739ms	114	0
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338

Llamada de herramientas	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de salida	Tokens de razonamiento
Gemma 4 26B A4B	10.0	10.0	100.0%	0		57.10s	210	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810

Comparación rápida

Cambiar par de comparación

Gemma 4 26B A4BnonevsGPT-5 Nanomedium Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsGLM 4.7 Flashnone Gemma 4 26B A4BnonevsGrok 4.20 Multi Agent Betamedium Mistral Small 4mediumvsQwen3.5-27Bnone Gemma 4 26B A4BnonevsMercury 2medium Mistral Small 4mediumvsGPT-5.4none Mistral Small 4mediumvsMiMo-V2-Pronone Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGrok 4.20none Mistral Small 4mediumvsGrok 4.20 Betanone Mistral Small 4mediumvsKimi K2.5none