Ranking de Resolução de quebra-cabeças x Sem resposta

Falhas por categoria AI BENCHY

Veja quais modelos de IA têm mais chance de encontrar Sem resposta em Resolução de quebra-cabeças, para identificar pontos fracos mais rápido. Ordenar por: Testes corretos ↓.

Modelos exibidos

Falhas totais

Modelo mais afetado

MiMo-V2.5 1

Motivos de falha

Resposta incorreta147 Não seguiu as instruções78 Erro de API13 Formatação extra5 Tempo esgotado5 Sem resposta1

Categorias

Programação18 Conhecimentos gerais6 Análise e extração de dados5 Específico do domínio5 Chamada de ferramentas2 Combinado2 Seguimento de instruções2 Truques anti-IA2 Resolução de quebra-cabeças1

Posição	Modelo	Empresa	Contagem de Sem resposta	Pontuação da categoria	Testes corretos	Tempo de resposta (médio)
#56	MiMo-V2.5 medium	Xiaomi	1	8.2	2/3	20.3s

Melhores modelos por Contagem de Sem resposta

Contagem de Sem resposta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado

Resolução de quebra-cabeças: Sem resposta

Melhores modelos por Contagem de Sem resposta

Contagem de Sem resposta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado