Ranking de Específico do domínio x Erro de API

Veja quais modelos de IA têm mais chance de encontrar Erro de API em Específico do domínio, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

Modelo mais afetado

Motivos de falha

Resposta incorreta412 Tempo esgotado43 Formatação extra17 Sem resposta8 Erro de API7 Não seguiu as instruções1

Categorias

Programação45 Combinado26 Chamada de ferramentas17 Análise e extração de dados14 Truques anti-IA14 Conhecimentos gerais13 Inteligência geral12 Resolução de quebra-cabeças12 Específico do domínio7 Seguimento de instruções1

7/7

Posição	Modelo	Empresa	Contagem de Erro de API	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#27	Muse Spark 1.1 high	Meta	1	3.5	$1.694	0/3	67.4s
Total de testes 3 Testes errados 3 Custo total $1.694 Tempo de resposta (médio) 67.4s
#158	KAT-Coder-Air V2.5 low	Kwaipilot	1	2.9	$0.041	0/3	4.99s
Total de testes 3 Testes errados 3 Custo total $0.041 Tempo de resposta (médio) 4.99s
#167	Mistral Small 4 medium	Mistral	1	5.3	$0.096	1/3	6.11s
Total de testes 3 Testes errados 2 Custo total $0.096 Tempo de resposta (médio) 6.11s
#173	DeepSeek V3.2 none	DeepSeek	1	2.9	$0.054	0/3	4.17s
Total de testes 3 Testes errados 3 Custo total $0.054 Tempo de resposta (médio) 4.17s
#175	Qwen3.6 Plus Preview medium	Qwen	1	3.0	$0.000	0/3	22.1s
Total de testes 3 Testes errados 3 Custo total $0.000 Tempo de resposta (médio) 22.1s
#199	Hy3 preview none	Tencent	1	3.6	$0.003	0/3	17.6s
Total de testes 3 Testes errados 3 Custo total $0.003 Tempo de resposta (médio) 17.6s
#210	LFM2-24B-A2B none	Liquid	1	5.9	$0.001	1/3	287ms
Total de testes 3 Testes errados 2 Custo total $0.001 Tempo de resposta (médio) 287ms

Filtrar modelos