#89 KAT-Coder-Pro V2.5
none- Custo
- $0.010
- Tempo
- 29.0s
- Tokens
- 3,439 tok
AI BENCHY Compare
Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.5 Flash
Resumo
KAT-Coder-Pro V2.5 lidera na pontuação média com 6.8 vs 6.6. Step 3.5 Flash (medium) tem menor custo de benchmark com $0.070 vs $0.220. KAT-Coder-Pro V2.5 é mais rápido com 10.81s vs 72.53s, com taxas de acerto de 71.4% vs 54.0%.
Modelo recomendadoKAT-Coder-Pro V2.5Tem a melhor pontuação aqui (6.8) e responde cerca de 6.7x mais rápido que Step 3.5 Flash (medium).
Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14
| Métrica | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none | Step 3.5 Flash Step 3.5 Flash medium |
|---|---|---|
| Pontuação | 6.8 | 6.6 |
| Posição | #89 | #98 |
| Confiabilidade | 10.0 | 10.0 |
| Consistência | 7.3 | 8.9 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 71.4% | 54.0% |
| Testes instáveis | 7 | 1 |
| Execuções totais | 63 | 60 |
| Custo por resultado | 1.992 | 0.198 |
| Custo total | $0.220 | $0.070 |
| Preço de entrada | $0.740 / 1M | $0.100 / 1M |
| Preço de saída | $2.960 / 1M | $0.300 / 1M |
| Total de tokens de entrada | 42,749 | 34,431 |
| Tokens de saída | 63,338 | 91,587 |
| Tokens de raciocínio | 0 | 195,973 |
| Tempo de resposta (médio) | 10.81s | 72.53s |
| Tempo de resposta (máx.) | 53.57s | 453.94s |
| Tempo de resposta (total) | 227.02s | 1015.47s |
Geração showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#98 Step 3.5 Flash
medium- Custo
- $0.008
- Tempo
- 277.1s
- Tokens
- 23,695 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.1 | 4.7 | 66.7% | 2 | 22.52s | 7,893 | 22,440 | 0 | |
| Step 3.5 Flash | 2.4 | 5.2 | 0.0% | 0 | 258.38s | 2,211 | 13,207 | 22,429 |
Comparação rápida
Trocar par de comparação
Ring-2.6-1TmediumvsKAT-Coder-Pro V2.5noneGemini 3.5 FlashminimalvsKAT-Coder-Pro V2.5noneKAT-Coder-Pro V2.5nonevsQwen3.5-FlashmediumKAT-Coder-Pro V2.5nonevsQwen3.6 35B A3BmediumKAT-Coder-Pro V2.5nonevsMiMo-V2.5mediumKAT-Coder-Pro V2.5nonevsgpt-oss-120bmediumDisponível grátisGemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumKAT-Coder-Pro V2.5nonevsGPT-5 NanomediumGemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumGemini 3.1 Flash LitelowvsStep 3.5 FlashmediumGemini 3.5 FlashminimalvsStep 3.5 FlashmediumKAT-Coder-Pro V2.5nonevsKimi K2.7 Codemedium