Ranking de Programación x No siguió las instrucciones

Fallos por categoría de AI BENCHY

Mira qué modelos de IA tienen más probabilidades de caer en No siguió las instrucciones dentro de Programación, para detectar puntos débiles más rápido.

Modelos mostrados

Fallos totales

Modelo más afectado

Gemini 3.5 Flash 1

Motivos de fallo

Respuesta incorrecta230 Error de API43 Tiempo agotado23 Sin respuesta18 No siguió las instrucciones16 Formato extra12

Categorías

Resolución de acertijos82 Inteligencia general74 Trucos anti-IA31 Programación16 Seguimiento de instrucciones15 Llamada de herramientas6 Combinado1 Específico del dominio1

16/16

Rango	Modelo	Empresa	Cantidad de No siguió las instrucciones	Puntuación de categoría	Costo total	Pruebas correctas	Tiempo de respuesta (promedio)
#184	Qwen3.5-9B medium	Qwen	1	2.9	$0.036	0/3	100.9s
Pruebas totales 3 Pruebas incorrectas 3 Costo total $0.036 Tiempo de respuesta (promedio) 100.9s

Filtrar modelos

Mejores modelos por Cantidad de No siguió las instrucciones

Cantidad de No siguió las instrucciones vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado

Programación: No siguió las instrucciones

Filtrar modelos

Mejores modelos por Cantidad de No siguió las instrucciones

Cantidad de No siguió las instrucciones vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado