Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Mistral: Mistral Small 4

Resumo

Mistral Small 4 (medium) lidera na pontuação média com 5.1 vs 4.9. KAT-Coder-Air V2.5 tem menor custo de benchmark com $0.037 vs $0.068. KAT-Coder-Air V2.5 é mais rápido com 6.99s vs 9.40s, com taxas de acerto de 38.1% vs 44.4%.

Modelo recomendadoMistral Small 4 (medium)Tem a pontuação mais forte nesta comparação (5.1) e o melhor equilíbrio geral entre custo e tempo de resposta entre os 2 modelos.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Lançamento: 2026-07-14 Mistral Small 4 Mistral Small 4 medium Lançamento: 2026-03-16
Pontuação 4.9 5.1
Posição #168 #160
Confiabilidade 10.0 10.0
Consistência 7.1 6.9
Testes corretos
Taxa de acerto por tentativa 38.1% 44.4%
Testes instáveis 7 8
Execuções totais 63 63
Custo por resultado 0.724 1.344
Custo total $0.037 $0.068
Preço de entrada $0.150 / 1M $0.150 / 1M
Preço de saída $0.600 / 1M $0.600 / 1M
Total de tokens de entrada 41,328 42,576
Tokens de saída 49,933 24,184
Tokens de raciocínio 0 84,678
Tempo de resposta (médio) 6.99s 9.40s
Tempo de resposta (máx.) 24.94s 59.15s
Tempo de resposta (total) 146.78s 197.39s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 KAT-Coder-Air V2.5

none
Custo
$0.002
Tempo
14.5s
Tokens
2,619 tok

#160 Mistral Small 4

medium
Custo
$0.006
Tempo
47.9s
Tokens
9,857 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

Comparação rápida

Trocar par de comparação