Ranking de Combinado x Formatação extra

Falhas por categoria AI BENCHY

Veja quais modelos de IA têm mais chance de encontrar Formatação extra em Combinado, para identificar pontos fracos mais rápido. Ordenar por: Custo total ↓.

Modelos exibidos

Falhas totais

Modelo mais afetado

North Mini Code 1

Motivos de falha

Resposta incorreta53 Chamada de ferramenta inválida20 Erro de API13 Sem resposta2 Tempo esgotado2 Formatação extra1 Não seguiu as instruções1

Categorias

Truques anti-IA18 Específico do domínio13 Programação11 Análise e extração de dados4 Resolução de quebra-cabeças4 Seguimento de instruções2 Combinado1

1/1

Posição	Modelo	Empresa	Contagem de Formatação extra	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#107	North Mini Code medium	Cohere	1	2.8	$0.000	0/1	323.1s
Total de testes 1 Testes errados 1 Custo total $0.000 Tempo de resposta (médio) 323.1s

Filtrar modelos

Melhores modelos por Contagem de Formatação extra

Contagem de Formatação extra vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado

Combinado: Formatação extra

Filtrar modelos

Melhores modelos por Contagem de Formatação extra

Contagem de Formatação extra vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado