Ranking de Resolução de quebra-cabeças x Formatação extra

Veja quais modelos de IA têm mais chance de encontrar Formatação extra em Resolução de quebra-cabeças, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

Modelo mais afetado

Motivos de falha

Resposta incorreta352 Não seguiu as instruções166 Erro de API35 Formatação extra16 Sem resposta14 Tempo esgotado11

Categorias

Programação37 Específico do domínio36 Truques anti-IA34 Resolução de quebra-cabeças16 Análise e extração de dados12 Seguimento de instruções8 Combinado1

16/16

Posição	Modelo	Empresa	Contagem de Formatação extra	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#389	Granite 4.2 8B none	IBM Granite	1	0.3	$0.037	0/3	107.6s
Total de testes 3 Testes errados 3 Custo total $0.037 Tempo de resposta (médio) 107.6s

Filtrar modelos