Ranking de Específico del dominio x Error de API

Fallos por categoría de AI BENCHY

Mira qué modelos de IA tienen más probabilidades de caer en Error de API dentro de Específico del dominio, para detectar puntos débiles más rápido. Ordenar por: Pruebas correctas ↑.

Modelos mostrados

Fallos totales

Modelo más afectado

Qwen3.6 Plus Preview 1

Motivos de fallo

Respuesta incorrecta314 Tiempo agotado34 Formato extra12 Error de API6 Sin respuesta5 No siguió las instrucciones1

Categorías

Programación43 Análisis y extracción de datos16 Llamada de herramientas15 Combinado13 Resolución de acertijos13 Trucos anti-IA13 Cultura general12 Inteligencia general12 Específico del dominio6 Seguimiento de instrucciones1

Rango	Modelo	Empresa	Cantidad de Error de API	Puntuación de categoría	Pruebas correctas	Tiempo de respuesta (promedio)
#93	Qwen3.6 Plus Preview medium	Qwen	1	3.0	0/3	22.1s
#103	DeepSeek V4 Pro high	DeepSeek	1	2.9	0/3	205.7s
#133	DeepSeek V3.2 none	DeepSeek	1	2.9	0/3	4.17s
#156	Hy3 preview none	Tencent	1	3.6	0/3	17.6s
#132	Mistral Small 4 medium	Mistral	1	5.3	1/3	6.11s
#160	LFM2-24B-A2B none	Liquid	1	5.9	1/3	287ms

Mejores modelos por Cantidad de Error de API

Cantidad de Error de API vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado

Específico del dominio: Error de API

Mejores modelos por Cantidad de Error de API

Cantidad de Error de API vs Puntuación

Mejores modelos por Tiempo de respuesta (promedio)

Mejores modelos por Costo desperdiciado estimado