AI BENCHY
Your ad here

Falhas por categoria AI BENCHY

Combinado: Erro de API

Combinado
Erro de API

Veja quais modelos de IA têm mais chance de encontrar Erro de API em Combinado, para identificar pontos fracos mais rápido.

Modelos exibidos

5

Falhas totais

5

Modelo mais afetado

Gemma 4 31B 1

Motivos de falha

Resposta incorreta37 Chamada de ferramenta inválida10 Erro de API5 Tempo esgotado2 Sem resposta1

Categorias

Análise e extração de dados6 Chamada de ferramentas6 Programação6 Combinado5 Específico do domínio2 Resolução de quebra-cabeças1 Seguimento de instruções1
Posição Modelo Empresa Contagem de Erro de API Pontuação da categoria Testes corretos Tempo de resposta (médio)
#14 Gemma 4 31B medium Google 1 3.0 0/1 0ms
#48 Gemma 4 31B none Google 1 3.0 0/1 0ms
#56 Grok 4.20 Multi Agent Beta medium X AI 1 3.0 0/1 0ms
#84 gpt-oss-120b none OpenAI 1 3.0 0/1 0ms
#98 LFM2-24B-A2B none Liquid 1 3.0 0/1 0ms

Melhores modelos por Contagem de Erro de API

Contagem de Erro de API vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado