Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

Resumo

GPT-5.6 Luna (high) lidera na pontuação média com 7.7 vs 7.5. KAT-Coder-Pro V2.5 (medium) tem menor custo de benchmark com $0.275 vs $0.924. KAT-Coder-Pro V2.5 (medium) é mais rápido com 12.95s vs 18.39s, com taxas de acerto de 65.1% vs 71.4%.

Modelo recomendadoKAT-Coder-Pro V2.5 (medium)A pontuação fica perto da melhor aqui (7.5 vs 7.7) e custa cerca de 3.4x menos que GPT-5.6 Luna (high).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lançamento: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna high Lançamento: 2026-07-09
Pontuação 7.5 7.7
Posição #60 #52
Confiabilidade 10.0 10.0
Consistência 7.7 8.8
Testes corretos
Taxa de acerto por tentativa 65.1% 71.4%
Testes instáveis 6 3
Execuções totais 63 63
Custo por resultado 2.498 6.594
Custo total $0.275 $0.924
Preço de entrada $0.740 / 1M $1.000 / 1M
Preço de saída $2.960 / 1M $6.000 / 1M
Total de tokens de entrada 42,750 35,699
Tokens de saída 2,098 2,079
Tokens de raciocínio 80,027 145,816
Tempo de resposta (médio) 12.95s 18.39s
Tempo de resposta (máx.) 81.45s 111.09s
Tempo de resposta (total) 271.92s 386.24s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Custo
$0.009
Tempo
25.6s
Tokens
2,939 tok

#52 GPT-5.6 Luna

high
Custo
$0.033
Tempo
34.2s
Tokens
5,484 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.6 Luna 5.5 4.7 55.6% 2 15.63s 7,302 510 17,746

Comparação rápida

Trocar par de comparação