Ranking de falhas por Erro de API

Falhas AI BENCHY

Veja quais modelos de IA encontram Erro de API com mais frequência para identificar riscos de confiabilidade antes de escolher. Ordenar por: Contagem de falhas ↑.

Modelos exibidos

Falhas totais

Modelo mais afetado

Gemini 3 PRO Preview 1

Categorias

Na categoria Análise e extração de dados6 Na categoria Chamada de ferramentas6 Na categoria Programação6 Na categoria Combinado5 Na categoria Específico do domínio2 Na categoria Resolução de quebra-cabeças1 Na categoria Seguimento de instruções1

Posição	Modelo	Empresa	Contagem de Erro de API	Pontuação	Testes corretos	Tempo de resposta (médio)
#73	Mistral Small 4 medium	Mistral	2	5.7	5/18	5.64s
#84	gpt-oss-120b none	OpenAI	3	5.2	4/18	12.0s
#98	LFM2-24B-A2B none	Liquid	4	4.1	1/16	811ms

Falhas por Erro de API

Melhores modelos por Contagem de Erro de API

Contagem de Erro de API vs Pontuação

Melhores modelos por Tempo de resposta (médio)