Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3.5 Flash vs Kwaipilot: KAT-Coder-Pro V2.5

Resumo

A pontuação média está praticamente empatada em 6.8 vs 6.8. Gemini 3.5 Flash (minimal) tem menor custo de benchmark com $0.108 vs $0.220. Gemini 3.5 Flash (minimal) é mais rápido com 1.57s vs 10.81s, com taxas de acerto de 68.3% vs 71.4%.

Modelo recomendadoGemini 3.5 Flash (minimal)Tem a melhor pontuação aqui (6.8) e custa cerca de 2.0x menos que KAT-Coder-Pro V2.5.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14

Métrica Gemini 3.5 Flash Gemini 3.5 Flash minimal Lançamento: 2026-05-19 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lançamento: 2026-07-14
Pontuação 6.8 6.8
Posição #88 #89
Confiabilidade 10.0 10.0
Consistência 9.6 7.3
Testes corretos
Taxa de acerto por tentativa 68.3% 71.4%
Testes instáveis 1 7
Execuções totais 63 63
Custo por resultado 0.767 1.992
Custo total $0.108 $0.220
Preço de entrada $1.500 / 1M $0.740 / 1M
Preço de saída $9.000 / 1M $2.960 / 1M
Total de tokens de entrada 39,847 42,749
Tokens de saída 5,277 63,338
Tokens de raciocínio 0 0
Tempo de resposta (médio) 1.57s 10.81s
Tempo de resposta (máx.) 5.51s 53.57s
Tempo de resposta (total) 33.02s 227.02s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#88 Gemini 3.5 Flash

minimal
Custo
$0.041
Tempo
20.4s
Tokens
4,608 tok

#89 KAT-Coder-Pro V2.5

none
Custo
$0.010
Tempo
29.0s
Tokens
3,439 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 5.6 9.9 33.3% 0 2.75s 8,122 3,456 0
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0

Comparação rápida

Trocar par de comparação