Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs NVIDIA: Nemotron 3 Super

Resumo

Nemotron 3 Super (medium) lidera na pontuação média com 6.3 vs 6.2. Nemotron 3 Super (medium) tem menor custo de benchmark com $0.020 vs $0.064. KAT-Coder-Air V2.5 (high) é mais rápido com 11.02s vs 32.00s, com taxas de acerto de 46.0% vs 41.3%.

Modelo recomendadoKAT-Coder-Air V2.5 (high)A pontuação fica perto da melhor aqui (6.2 vs 6.3) e responde cerca de 2.9x mais rápido que Nemotron 3 Super (medium).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lançamento: 2026-07-14 Nemotron 3 Super Nemotron 3 Super medium Lançamento: 2026-03-11 Disponível grátis
Pontuação 6.2 6.3
Posição #110 #105
Confiabilidade 9.7 10.0
Consistência 7.6 9.2
Testes corretos
Taxa de acerto por tentativa 46.0% 41.3%
Testes instáveis 6 2
Execuções totais 63 63
Custo por resultado 0.910 0.004
Custo total $0.064 $0.020
Preço de entrada $0.150 / 1M $0.080 / 1M
Preço de saída $0.600 / 1M $0.450 / 1M
Total de tokens de entrada 41,748 37,527
Tokens de saída 3,894 14,850
Tokens de raciocínio 91,773 33,754
Tempo de resposta (médio) 11.02s 32.00s
Tempo de resposta (máx.) 104.98s 232.25s
Tempo de resposta (total) 231.37s 607.91s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
SVG inválido
Custo
$0.000
Tempo
300.0s
Tokens
0 tok

#105 Nemotron 3 Super

medium
Custo
$0.000
Tempo
272.6s
Tokens
5,296 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3 Super 3.1 10.0 0.0% 0 147.32s 2,275 797 4,424

Comparação rápida

Trocar par de comparação