Ranking de Resolução de quebra-cabeças x Sem resposta

Veja quais modelos de IA têm mais chance de encontrar Sem resposta em Resolução de quebra-cabeças, para identificar pontos fracos mais rápido. Ordenar por: Custo total ↓.

Modelos exibidos

Falhas totais

Modelo mais afetado

Claude Fable 5 1

Motivos de falha

Resposta incorreta201 Não seguiu as instruções90 Erro de API12 Formatação extra8 Tempo esgotado5 Sem resposta3

Categorias

Combinado29 Programação18 Conhecimentos gerais13 Análise e extração de dados8 Específico do domínio8 Truques anti-IA4 Resolução de quebra-cabeças3 Chamada de ferramentas2 Seguimento de instruções2

3/3

Posição	Modelo	Empresa	Contagem de Sem resposta	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#17	Claude Fable 5 medium	Anthropic	1	7.7	$3.478	2/3	5.18s
Total de testes 3 Testes errados 1 Custo total $3.478 Tempo de resposta (médio) 5.18s
#27	Muse Spark 1.1 high	Meta	1	7.8	$1.694	2/3	70.0s
Total de testes 3 Testes errados 1 Custo total $1.694 Tempo de resposta (médio) 70.0s
#101	MiMo-V2.5 medium	Xiaomi	1	8.2	$0.082	2/3	20.3s
Total de testes 3 Testes errados 1 Custo total $0.082 Tempo de resposta (médio) 20.3s

Filtrar modelos

Melhores modelos por Contagem de Sem resposta

Contagem de Sem resposta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado

Resolução de quebra-cabeças: Sem resposta

Filtrar modelos

Melhores modelos por Contagem de Sem resposta

Contagem de Sem resposta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado