Ranking de Específico do domínio x Erro de API

Falhas por categoria AI BENCHY

Veja quais modelos de IA têm mais chance de encontrar Erro de API em Específico do domínio, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

Modelo mais afetado

Motivos de falha

Resposta incorreta182 Tempo esgotado31 Formatação extra8 Erro de API2 Sem resposta2

Categorias

Análise e extração de dados6 Chamada de ferramentas6 Programação6 Combinado5 Específico do domínio2 Resolução de quebra-cabeças1 Seguimento de instruções1

Posição	Modelo	Empresa	Contagem de Erro de API	Pontuação da categoria	Testes corretos	Tempo de resposta (médio)
#73	Mistral Small 4 medium	Mistral	1	5.3	1/3	6.11s
#98	LFM2-24B-A2B none	Liquid	1	5.9	1/3	287ms

Melhores modelos por Contagem de Erro de API