AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.7 Max

Resumo

Qwen3.7 Max lidera na pontuação média com 6.9 vs 6.8. Qwen3.7 Max tem menor custo de benchmark com $0.054 vs $0.220. Qwen3.7 Max é mais rápido com 1.30s vs 10.81s, com taxas de acerto de 71.4% vs 66.7%.

Modelo recomendadoQwen3.7 MaxTem a melhor pontuação aqui (6.9) e custa cerca de 4.1x menos que KAT-Coder-Pro V2.5.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lançamento: 2026-07-14	Qwen3.7 Max Qwen3.7 Max none Lançamento: 2026-05-22

Métrica	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lançamento: 2026-07-14	Qwen3.7 Max Qwen3.7 Max none Lançamento: 2026-05-22
Pontuação	6.8	6.9
Posição	#89	#85
Confiabilidade	10.0	10.0
Consistência	7.3	10.0
Testes corretos
Taxa de acerto por tentativa	71.4%	66.7%
Testes instáveis	7	0
Execuções totais	63	63
Custo por resultado	1.992	0.744
Custo total	$0.220	$0.054
Preço de entrada	$0.740 / 1M	$1.250 / 1M
Preço de saída	$2.960 / 1M	$3.750 / 1M
Total de tokens de entrada	42,749	37,107
Tokens de saída	63,338	1,994
Tokens de raciocínio	0	0
Tempo de resposta (médio)	10.81s	1.30s
Tempo de resposta (máx.)	53.57s	3.92s
Tempo de resposta (total)	227.02s	27.21s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none

Custo: $0.010
Tempo: 29.0s
Tokens: 3,439 tok

#85 Qwen3.7 Max

none

Custo: $0.046
Tempo: 195.0s
Tokens: 12,171 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Categoria:

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	3,998	0
Qwen3.7 Max	6.5	10.0	50.0%	0		1.08s	696	242	0

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	22,440	0
Qwen3.7 Max	5.5	10.0	33.3%	0		1.35s	7,911	582	0

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	4.7	1.6	66.7%	1		30.76s	15,131	5,366	0
Qwen3.7 Max	3.0	10.0	0.0%	0		2.17s	9,549	171	0

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	2,361	0
Qwen3.7 Max	10.0	10.0	100.0%	0		1.35s	7,794	243	0

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	3.6	7.2	22.2%	1		21.64s	771	20,972	0
Qwen3.7 Max	7.7	10.0	66.7%	0		975ms	789	15	0

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	1,067	0
Qwen3.7 Max	10.0	10.0	100.0%	0		1.04s	522	120	0

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	1,084	0
Qwen3.7 Max	10.0	10.0	100.0%	0		943ms	711	72	0

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	1,929	0
Qwen3.7 Max	10.0	10.0	100.0%	0		1.13s	714	314	0

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	1,103	0
Qwen3.7 Max	10.0	10.0	100.0%	0		3.92s	8,211	222	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	3,018	0
Qwen3.7 Max	3.0	10.0	0.0%	0		856ms	210	13	0

Comparação rápida

Trocar par de comparação

Ring-2.6-1TmediumvsKAT-Coder-Pro V2.5none Gemini 3.5 FlashminimalvsKAT-Coder-Pro V2.5none Gemini 3.5 FlashminimalvsQwen3.7 Maxnone KAT-Coder-Pro V2.5nonevsQwen3.5-Flashmedium Ring-2.6-1TmediumvsQwen3.7 Maxnone KAT-Coder-Pro V2.5nonevsQwen3.6 35B A3Bmedium KAT-Coder-Pro V2.5nonevsMiMo-V2.5medium KAT-Coder-Pro V2.5nonevsgpt-oss-120bmediumDisponível grátis Qwen3.7 MaxnonevsMiMo-V2.5medium KAT-Coder-Pro V2.5nonevsGPT-5 Nanomedium Kimi K2.7 CodemediumvsQwen3.7 Maxnone gpt-oss-120bmediumDisponível grátisvsQwen3.7 Maxnone