Ranking de Programação x Sem resposta

Veja quais modelos de IA têm mais chance de encontrar Sem resposta em Programação, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

Modelo mais afetado

Motivos de falha

Resposta incorreta337 Erro de API51 Sem resposta39 Tempo esgotado27 Formatação extra25 Não seguiu as instruções25

Categorias

Programação39 Combinado38 Específico do domínio33 Conhecimentos gerais23 Truques anti-IA13 Análise e extração de dados9 Resolução de quebra-cabeças9 Chamada de ferramentas2 Seguimento de instruções2

31/31

Posição	Modelo	Empresa	Contagem de Sem resposta	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#282	Qwen3.5-9B medium	Qwen	1	2.9	$0.062	0/3	100.9s
Total de testes 3 Testes errados 3 Custo total $0.062 Tempo de resposta (médio) 100.9s

Filtrar modelos