Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Anthropic: Claude Opus 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Resumo

A pontuação média está praticamente empatada em 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) tem menor custo de benchmark com $0.246 vs $2.053. KAT-Coder-Pro V2.5 (high) é mais rápido com 12.30s vs 25.89s, com taxas de acerto de 61.9% vs 63.5%.

Modelo recomendadoKAT-Coder-Pro V2.5 (high)Tem a melhor pontuação aqui (7.7) e custa cerca de 8.4x menos que Claude Opus 4.6 (medium).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica Claude Opus 4.6 Claude Opus 4.6 medium Lançamento: 2026-02-05 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Lançamento: 2026-07-14
Pontuação 7.7 7.7
Posição #50 #53
Confiabilidade 10.0 10.0
Consistência 8.8 8.1
Testes corretos
Taxa de acerto por tentativa 61.9% 63.5%
Testes instáveis 3 5
Execuções totais 63 63
Custo por resultado 17.103 2.228
Custo total $2.053 $0.246
Preço de entrada $5.000 / 1M $0.740 / 1M
Preço de saída $25.000 / 1M $2.960 / 1M
Total de tokens de entrada 53,227 42,750
Tokens de saída 47,446 2,509
Tokens de raciocínio 24,000 69,594
Tempo de resposta (médio) 25.89s 12.30s
Tempo de resposta (máx.) 83.40s 95.65s
Tempo de resposta (total) 362.49s 258.34s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#50 Claude Opus 4.6

medium
SVG inválido
Custo
$0.000
Tempo
300.0s
Tokens
0 tok

#53 KAT-Coder-Pro V2.5

high
Custo
$0.009
Tempo
26.4s
Tokens
3,117 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.6 5.7 7.1 44.4% 1 30.10s 8,522 13,057 4,121
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Comparação rápida

Trocar par de comparação