- Posição
- #192
- Total de tokens de saída
- 37,748
- Tempo de resposta (médio)
- 8.03s
- Custo total
- $1.100
Claude Sonnet 5.5 (medium) vs KAT-Coder-Pro V2.5 (high)
Claude Sonnet 5.5 (medium) lidera na pontuação média com 6.5 vs 6.5. KAT-Coder-Pro V2.5 (high) tem menor custo de benchmark com $0.506 vs $1.100. Claude Sonnet 5.5 (medium) é mais rápido com 8.03s vs 21.21s, com taxas de acerto de 40.6% vs 60.9%.
Modelos comparados
- Posição
- #198
- Total de tokens de saída
- 144,359
- Tempo de resposta (médio)
- 21.21s
- Custo total
- $0.506
Modelo recomendado
Claude Sonnet 5.5 (medium)
Tem a melhor pontuação aqui (6.5) e responde cerca de 2.6x mais rápido que KAT-Coder-Pro V2.5 (high).
Comparação detalhada
| Métrica | Claude Sonnet 5.5 Claude Sonnet 5.5 medium | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high |
|---|---|---|
| Pontuação | 6.5 | 6.5 |
| Posição | #192 | #198 |
| Confiabilidade | 10.0 | 10.0 |
| Consistência | 9.7 | 7.9 |
| Tentativas | 69/69 | 69/69 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 40.6% | 60.9% |
| Testes instáveis | 1 | 6 |
| Execuções totais | 69 | 69 |
| Custo por resultado | 12.221 | 4.599 |
| Custo total | $1.100 | $0.506 |
| Preço de entrada | $2.000 / 1M | $0.740 / 1M |
| Preço de saída | $10.000 / 1M | $2.960 / 1M |
| Total de tokens de entrada | 361,183 | 106,085 |
| Tokens de saída | 26,609 | 9,071 |
| Tokens de raciocínio | 11,139 | 135,288 |
| Tempo de resposta (médio) | 8.03s | 21.21s |
| Tempo de resposta (máx.) | 51.18s | 199.97s |
| Tempo de resposta (total) | 184.80s | 487.83s |
| Parâmetros | ~1T no total (~100B ativos) | ~700B no total (~72B ativos) |
| Disponibilidade | Código fechado | Código fechado |
Geração showcase de modelos
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#192 Claude Sonnet 5.5
medium- Custo
- $0.024
- Tempo
- 17.4s
- Tokens
- 2,525 tok
#198 KAT-Coder-Pro V2.5
high- Custo
- $0.009
- Tempo
- 26.4s
- Tokens
- 3,117 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Tarefas de agentes | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 10.0 | 10.0 | 100.0% | 0 | 51.18s | 190,412 | 3,424 | 1,344 | |
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.52s | 0 | 0 | 0 |
| Truques anti-IA | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.5 | 10.0 | 50.0% | 0 | 2.54s | 858 | 1,697 | 0 | |
| KAT-Coder-Pro V2.5 | 7.0 | 8.0 | 66.7% | 1 | 3.17s | 672 | 447 | 2,716 |
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.4 | 9.7 | 0.0% | 0 | 6.07s | 10,608 | 6,767 | 0 | |
| KAT-Coder-Pro V2.5 | 6.4 | 7.9 | 44.4% | 1 | 22.00s | 7,893 | 422 | 20,461 |
| Combinado | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 8.5 | 10.0 | 50.0% | 0 | 23.58s | 133,232 | 7,780 | 5,241 | |
| KAT-Coder-Pro V2.5 | 7.3 | 5.8 | 83.3% | 1 | 106.70s | 78,458 | 6,956 | 60,306 |
| Análise e extração de dados | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.5 | 10.0 | 50.0% | 0 | 2.56s | 10,515 | 696 | 0 | |
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.13s | 7,776 | 278 | 1,960 |
| Específico do domínio | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.0 | 10.0 | 0.0% | 0 | 8.78s | 990 | 4,137 | 2,729 | |
| KAT-Coder-Pro V2.5 | 2.9 | 4.4 | 22.2% | 2 | 44.66s | 780 | 33 | 43,896 |
| Inteligência geral | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 5.1 | 3.4 | 33.3% | 1 | 2.27s | 714 | 324 | 0 | |
| KAT-Coder-Pro V2.5 | 5.1 | 10.0 | 0.0% | 0 | 3.27s | 516 | 139 | 647 |
| Seguimento de instruções | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.3 | 10.0 | 50.0% | 0 | 1.88s | 921 | 346 | 0 | |
| KAT-Coder-Pro V2.5 | 9.9 | 10.0 | 100.0% | 0 | 2.67s | 699 | 84 | 976 |
| Resolução de quebra-cabeças | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 7.7 | 10.0 | 66.7% | 0 | 2.43s | 912 | 876 | 0 | |
| KAT-Coder-Pro V2.5 | 8.2 | 7.2 | 88.9% | 1 | 3.38s | 696 | 428 | 1,936 |
| Chamada de ferramentas | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 10.0 | 10.0 | 100.0% | 0 | 4.75s | 11,757 | 354 | 0 | |
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 28.04s | 8,391 | 268 | 896 |
| Conhecimentos gerais | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.0 | 10.0 | 0.0% | 0 | 8.57s | 264 | 208 | 1,825 | |
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 5.22s | 204 | 16 | 1,494 |
Comparação rápida
Trocar par de comparação
KAT-Coder-Pro V2.5highvsGrok 4.3mediumKAT-Coder-Pro V2.5highvsGLM 5.1noneKAT-Coder-Pro V2.5highvsLaguna XS 2.1mediumDisponível grátisKAT-Coder-Pro V2.5highvsQwen3.5-122B-A10BnoneKAT-Coder-Pro V2.5highvsGLM 5.3lowClaude Sonnet 5.5mediumvsMercury 2.5 PreviewhighGemini 3 Flash PreviewnonevsKAT-Coder-Pro V2.5highClaude Sonnet 5.5mediumvsMercury 2.5highClaude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5lowClaude Sonnet 5.5mediumvsGLM 5.3lowKAT-Coder-Pro V2.5highvsSolar Pro 4mediumKAT-Coder-Pro V2.5highvsQwen3.6 35B A3Bmedium