Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Resumo

KAT-Coder-Pro V2.5 (medium) lidera na pontuação média com 7.5 vs 7.3. KAT-Coder-Pro V2.5 (medium) tem menor custo de benchmark com $0.275 vs $0.316. Claude Sonnet 4.6 é mais rápido com 5.04s vs 12.95s, com taxas de acerto de 55.6% vs 65.1%.

Modelo recomendadoClaude Sonnet 4.6A pontuação fica perto da melhor aqui (7.3 vs 7.5) e responde cerca de 2.6x mais rápido que KAT-Coder-Pro V2.5 (medium).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica Claude Sonnet 4.6 Claude Sonnet 4.6 none Lançamento: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lançamento: 2026-07-14
Pontuação 7.3 7.5
Posição #71 #60
Confiabilidade 10.0 10.0
Consistência 9.7 7.7
Testes corretos
Taxa de acerto por tentativa 55.6% 65.1%
Testes instáveis 1 6
Execuções totais 63 63
Custo por resultado 2.870 2.498
Custo total $0.316 $0.275
Preço de entrada $3.000 / 1M $0.740 / 1M
Preço de saída $15.000 / 1M $2.960 / 1M
Total de tokens de entrada 57,886 42,750
Tokens de saída 9,465 2,098
Tokens de raciocínio 0 80,027
Tempo de resposta (médio) 5.04s 12.95s
Tempo de resposta (máx.) 23.84s 81.45s
Tempo de resposta (total) 70.60s 271.92s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none
Custo
$0.038
Tempo
27.3s
Tokens
2,598 tok

#60 KAT-Coder-Pro V2.5

medium
Custo
$0.009
Tempo
25.6s
Tokens
2,939 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 5.5 10.0 33.3% 0 5.19s 8,522 2,127 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

Comparação rápida

Trocar par de comparação