Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 2.5 Flash vs Kwaipilot: KAT-Coder-Air V2.5

Resumo

KAT-Coder-Air V2.5 (high) lidera na pontuação média com 6.2 vs 6.2. Gemini 2.5 Flash tem menor custo de benchmark com $0.016 vs $0.064. Gemini 2.5 Flash é mais rápido com 875ms vs 11.02s, com taxas de acerto de 46.0% vs 46.0%.

Modelo recomendadoGemini 2.5 FlashA pontuação fica perto da melhor aqui (6.2 vs 6.2) e custa cerca de 4.2x menos que KAT-Coder-Air V2.5 (high).

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica Gemini 2.5 Flash Gemini 2.5 Flash none Lançamento: 2025-06-17 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lançamento: 2026-07-14
Pontuação 6.2 6.2
Posição #114 #110
Confiabilidade 10.0 9.7
Consistência 9.6 7.6
Testes corretos
Taxa de acerto por tentativa 46.0% 46.0%
Testes instáveis 1 6
Execuções totais 63 63
Custo por resultado 0.169 0.910
Custo total $0.016 $0.064
Preço de entrada $0.300 / 1M $0.150 / 1M
Preço de saída $2.500 / 1M $0.600 / 1M
Total de tokens de entrada 35,926 41,748
Tokens de saída 1,770 3,894
Tokens de raciocínio 0 91,773
Tempo de resposta (médio) 875ms 11.02s
Tempo de resposta (máx.) 4.39s 104.98s
Tempo de resposta (total) 18.37s 231.37s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#114 Gemini 2.5 Flash

none
SVG inválido
Custo
$0.164
Tempo
215.5s
Tokens
65,659 tok

#110 KAT-Coder-Air V2.5

high
SVG inválido
Custo
$0.000
Tempo
300.0s
Tokens
0 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

Comparação rápida

Trocar par de comparação