Ranking de falhas por Não seguiu as instruções

Veja quais modelos de IA encontram Não seguiu as instruções com mais frequência para identificar riscos de confiabilidade antes de escolher.

Modelos exibidos

Falhas totais

245

Modelo mais afetado

Categorias

Na categoria Resolução de quebra-cabeças90 Na categoria Inteligência geral78 Na categoria Truques anti-IA33 Na categoria Seguimento de instruções18 Na categoria Programação16 Na categoria Chamada de ferramentas8 Na categoria Combinado1 Na categoria Específico do domínio1

140/140

Posição	Modelo	Empresa	Contagem de Não seguiu as instruções	Pontuação	Custo total	Testes corretos	Tempo de resposta (médio)
#204	Qwen3.5-9B medium	Qwen	1	3.8	$0.036	3/22	82.2s
Total de testes 22 Testes errados 19 Custo total $0.036 Tempo de resposta (médio) 82.2s
#205	Laguna Xs.2 none	Poolside	1	3.8	$0.004	5/19	806ms
Total de testes 19 Testes errados 14 Custo total $0.004 Tempo de resposta (médio) 806ms
#207	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	1	3.4	$0.000	4/19	17.1s
Total de testes 19 Testes errados 15 Custo total $0.000 Tempo de resposta (médio) 17.1s
#209	Step 3.5 Flash none	Stepfun	1	2.3	$0.020	6/12	39.0s
Total de testes 12 Testes errados 6 Custo total $0.020 Tempo de resposta (médio) 39.0s
#210	LFM2-24B-A2B none	Liquid	1	2.2	$0.001	2/16	782ms
Total de testes 16 Testes errados 14 Custo total $0.001 Tempo de resposta (médio) 782ms

Falhas por Não seguiu as instruções