Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

Resumo

A pontuação média está praticamente empatada em 7.5 vs 7.6. GPT-5.6 Luna (medium) tem menor custo de benchmark com $0.258 vs $0.275. GPT-5.6 Luna (medium) é mais rápido com 6.70s vs 12.95s, com taxas de acerto de 65.1% vs 63.5%.

Modelo recomendadoGPT-5.6 Luna (medium)Tem a melhor pontuação aqui (7.6) e responde cerca de 1.9x mais rápido que KAT-Coder-Pro V2.5 (medium).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lançamento: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna medium Lançamento: 2026-07-09
Pontuação 7.5 7.6
Posição #60 #57
Confiabilidade 10.0 10.0
Consistência 7.7 9.6
Testes corretos
Taxa de acerto por tentativa 65.1% 63.5%
Testes instáveis 6 1
Execuções totais 63 63
Custo por resultado 2.498 1.978
Custo total $0.275 $0.258
Preço de entrada $0.740 / 1M $1.000 / 1M
Preço de saída $2.960 / 1M $6.000 / 1M
Total de tokens de entrada 42,750 35,699
Tokens de saída 2,098 2,148
Tokens de raciocínio 80,027 34,740
Tempo de resposta (médio) 12.95s 6.70s
Tempo de resposta (máx.) 81.45s 29.85s
Tempo de resposta (total) 271.92s 140.62s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Custo
$0.009
Tempo
25.6s
Tokens
2,939 tok

#57 GPT-5.6 Luna

medium
Custo
$0.014
Tempo
14.6s
Tokens
2,362 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928

Comparação rápida

Trocar par de comparação