AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#99

KAT-Coder-Pro V2.5

Kwaipilot Lançamento: 2026-07-14 Testado em: 2026-08-14 03:23 kwaipilot/kat-coder-pro-v2.5::low
~700B no total (~72B ativos)MoECódigo fechadoEstimado

Resumo

KAT-Coder-Pro V2.5 marca 7.3 no AI BENCHY e fica em #99. Tem fiabilidade 10.0, taxa de acerto de 68.2%, custo total de $0.400 e tempo médio de resposta de 20.20s.

O que torna KAT-Coder-Pro V2.5 único: Destaca-se mais em Seguimento de instruções, onde fica em #1, enquanto Inteligência geral é a área mais fraca em #17.

Dados do modelo

Pesquisado em 2026-08-12

Estimado
Parâmetros
~700B no total (~72B ativos)
Arquitetura
MoE
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Consistência

7.0

Total de tokens de saída

113,193

Total de tokens de entrada

87,682

Preço de entrada

$0.740 / 1M

Preço de saída

$2.960 / 1M

Testes corretos

Testes errados: 11

Taxa de acerto por tentativa: 68.2%

Testes instáveis

8

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

20.20s

Tempo de resposta (máx.): 209.15s

Tempo de resposta (total): 444.35s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#99 KAT-Coder-Pro V2.5

low
Custo
$0.016
Tempo
47.6s
Tokens
5,182 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-08-14 03:23 Novo teste 7.3 10.0 $0.400 Execução atual
2026-07-16 23:38 Novo teste adicionado 7.4 10.0 $0.387 Comparar
2026-07-14 11:05 Execução inicial 8.0 9.9 $0.220 Comparar

Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.

Histórico de preços

Dados históricos de preços deste modelo da OpenRouter.

Data Preço de entrada Preço de saída
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 6.9 5.8
Programação 7.8 10.0
Combinado 6.4 5.8
Análise e extração de dados 10.0 10.0
Específico do domínio 3.5 4.4
Inteligência geral 4.1 2.7
Seguimento de instruções 10.0 10.0
Resolução de quebra-cabeças 6.4 4.4
Chamada de ferramentas 10.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados