Ranking de Seguimento de instruções x Resposta incorreta

Veja quais modelos de IA têm mais chance de encontrar Resposta incorreta em Seguimento de instruções, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

Modelo mais afetado

Motivos de falha

Resposta incorreta82 Não seguiu as instruções48 Formatação extra7 Tempo esgotado5 Erro de API2 Sem resposta2

Categorias

Específico do domínio654 Truques anti-IA386 Programação361 Resolução de quebra-cabeças275 Conhecimentos gerais244 Combinado95 Inteligência geral90 Seguimento de instruções82 Análise e extração de dados66 Chamada de ferramentas5

82/82

Posição	Modelo	Empresa	Contagem de Resposta incorreta	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#297	Ling 3.0 Tiny none	Inclusionai	1	3.1	$0.000	0/2	2.44s
Total de testes 2 Testes errados 2 Custo total $0.000 Tempo de resposta (médio) 2.44s
#298	Granite 4.1 8B none	IBM Granite	1	3.6	$0.007	0/2	344ms
Total de testes 2 Testes errados 2 Custo total $0.007 Tempo de resposta (médio) 344ms
#299	Nemotron 3.5 Lightning none	NVIDIA	1	6.5	$0.007	1/2	511ms
Total de testes 2 Testes errados 1 Custo total $0.007 Tempo de resposta (médio) 511ms
#303	Grok 4.1 Fast none	X AI	1	3.0	$0.008	0/2	685ms
Total de testes 2 Testes errados 2 Custo total $0.008 Tempo de resposta (médio) 685ms
#306	Laguna Xs.2 none	Poolside	1	6.5	$0.004	1/2	439ms
Total de testes 2 Testes errados 1 Custo total $0.004 Tempo de resposta (médio) 439ms
#309	Nemotron 3 Nano Omni 30b A3b Reasoning none	NVIDIA	1	4.8	$0.000	0/2	541ms
Total de testes 2 Testes errados 2 Custo total $0.000 Tempo de resposta (médio) 541ms
#311	LFM2-24B-A2B none	Liquid	1	6.3	$0.001	1/2	752ms
Total de testes 2 Testes errados 1 Custo total $0.001 Tempo de resposta (médio) 752ms

←

1 2 3 4 5 6

Filtrar modelos