Ranking de Truques anti-IA x Resposta incorreta

Veja quais modelos de IA têm mais chance de encontrar Resposta incorreta em Truques anti-IA, para identificar pontos fracos mais rápido.

Modelos exibidos

Falhas totais

306

Modelo mais afetado

Seed-2.0-Lite 4

Motivos de falha

Resposta incorreta306 Não seguiu as instruções33 Formatação extra20 Erro de API15 Sem resposta6 Tempo esgotado4

Categorias

Específico do domínio433 Truques anti-IA306 Programação266 Resolução de quebra-cabeças214 Conhecimentos gerais176 Combinado71 Inteligência geral66 Seguimento de instruções65 Análise e extração de dados41 Chamada de ferramentas4

144/144

Posição	Modelo	Empresa	Contagem de Resposta incorreta	Pontuação da categoria	Custo total	Testes corretos	Tempo de resposta (médio)
#66	KAT-Coder-Pro V2.5 low	Kwaipilot	2	6.9	$0.387	2/4	4.20s
Total de testes 4 Testes errados 2 Custo total $0.387 Tempo de resposta (médio) 4.20s
#73	KAT-Coder-Pro V2.5 high	Kwaipilot	2	7.0	$0.482	2/4	3.17s
Total de testes 4 Testes errados 2 Custo total $0.482 Tempo de resposta (médio) 3.17s
#75	Qwen3.7 Plus none	Qwen	2	6.5	$0.106	2/4	1.38s
Total de testes 4 Testes errados 2 Custo total $0.106 Tempo de resposta (médio) 1.38s
#86	DeepSeek V4 Pro none	DeepSeek	2	3.2	$0.096	0/4	4.02s
Total de testes 4 Testes errados 4 Custo total $0.096 Tempo de resposta (médio) 4.02s
#91	GPT-5.5 none	OpenAI	2	6.9	$0.544	2/4	1.31s
Total de testes 4 Testes errados 2 Custo total $0.544 Tempo de resposta (médio) 1.31s
#92	Gemini 3.5 Flash minimal	Google	2	6.5	$0.300	2/4	892ms
Total de testes 4 Testes errados 2 Custo total $0.300 Tempo de resposta (médio) 892ms
#108	Laguna XS 2.1 medium	Poolside	2	4.8	$0.068	1/4	42.0s
Total de testes 4 Testes errados 3 Custo total $0.068 Tempo de resposta (médio) 42.0s
#111	Gemini 3.1 Flash Lite low	Google	2	7.3	$0.621	2/4	1.84s
Total de testes 4 Testes errados 2 Custo total $0.621 Tempo de resposta (médio) 1.84s
#121	Gemma 4 31B none	Google	2	6.5	$0.021	2/4	1.85s
Total de testes 4 Testes errados 2 Custo total $0.021 Tempo de resposta (médio) 1.85s
#128	Gemini 3.1 Flash Lite none	Google	2	7.5	$0.046	2/4	1.07s
Total de testes 4 Testes errados 2 Custo total $0.046 Tempo de resposta (médio) 1.07s
#134	GPT-5 Nano medium	OpenAI	2	6.5	$0.114	2/4	25.5s
Total de testes 4 Testes errados 2 Custo total $0.114 Tempo de resposta (médio) 25.5s
#165	KAT-Coder-Air V2.5 low	Kwaipilot	2	7.3	$0.041	2/4	3.50s
Total de testes 4 Testes errados 2 Custo total $0.041 Tempo de resposta (médio) 3.50s
#168	Laguna XS 2.1 none	Poolside	2	5.3	$0.008	1/4	755ms
Total de testes 4 Testes errados 3 Custo total $0.008 Tempo de resposta (médio) 755ms
#174	Qwen3 Coder Next none	Qwen	2	3.6	$0.025	0/4	3.31s
Total de testes 4 Testes errados 4 Custo total $0.025 Tempo de resposta (médio) 3.31s
#179	North Mini Code none	Cohere	2	3.0	$0.000	0/4	22.5s
Total de testes 4 Testes errados 4 Custo total $0.000 Tempo de resposta (médio) 22.5s

Filtrar modelos

Melhores modelos por Contagem de Resposta incorreta

Contagem de Resposta incorreta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado

Truques anti-IA: Resposta incorreta

Filtrar modelos

Melhores modelos por Contagem de Resposta incorreta

Contagem de Resposta incorreta vs Pontuação

Melhores modelos por Tempo de resposta (médio)

Melhores modelos por Custo desperdiçado estimado