Ranking de Programación x No siguió las instrucciones

Fallos por categoría de AI BENCHY

Mira qué modelos de IA tienen más probabilidades de caer en No siguió las instrucciones dentro de Programación, para detectar puntos débiles más rápido. Ordenar por: Pruebas correctas ↓.

Modelos mostrados

Fallos totales

Modelo más afectado

Grok 4.1 Fast 1

Motivos de fallo

Respuesta incorrecta26 Tiempo agotado12 Error de API6 No siguió las instrucciones2

Categorías

Resolución de acertijos68 Inteligencia general55 Seguimiento de instrucciones22 Trucos anti-IA15 Llamada de herramientas6 Programación2

Rango	Modelo	Empresa	Cantidad de No siguió las instrucciones	Puntuación de categoría	Pruebas correctas	Tiempo de respuesta (promedio)
#49	Grok 4.1 Fast medium	X AI	1	2.3	0/1	23.6s
#91	Qwen3.5-9B medium	Qwen	1	2.6	0/1	135.6s

Mejores modelos por Cantidad de No siguió las instrucciones

Cantidad de No siguió las instrucciones vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado

Programación: No siguió las instrucciones

Mejores modelos por Cantidad de No siguió las instrucciones

Cantidad de No siguió las instrucciones vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado