- Posição
- #194
- Total de tokens de saída
- 180,597
- Tempo de resposta (médio)
- 7.61s
- Custo total
- $0.039
Mercury 2.5 Preview (high) vs KAT-Coder-Pro V2.5 (low)
KAT-Coder-Pro V2.5 (low) lidera na pontuação média com 6.5 vs 6.5. Mercury 2.5 Preview (high) tem menor custo de benchmark com $0.039 vs $0.400. Mercury 2.5 Preview (high) é mais rápido com 7.61s vs 19.40s, com taxas de acerto de 65.2% vs 65.2%.
Modelos comparados
- Posição
- #191
- Total de tokens de saída
- 113,193
- Tempo de resposta (médio)
- 19.40s
- Custo total
- $0.400
Modelo recomendado
Mercury 2.5 Preview (high)
A pontuação fica perto da melhor aqui (6.5 vs 6.5) e custa cerca de 10.5x menos que KAT-Coder-Pro V2.5 (low).
Comparação detalhada
| Métrica | Mercury 2.5 Preview Mercury 2.5 Preview high | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low |
|---|---|---|
| Pontuação | 6.5 | 6.5 |
| Posição | #194 | #191 |
| Confiabilidade | 9.9 | 10.0 |
| Consistência | 8.0 | 7.1 |
| Tentativas | 69/69 | 69/69 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 65.2% | 65.2% |
| Testes instáveis | 6 | 8 |
| Execuções totais | 69 | 69 |
| Custo por resultado | 0.319 | 3.636 |
| Custo total | $0.039 | $0.400 |
| Preço de entrada | $0.000 / 1M | $0.740 / 1M |
| Preço de saída | $0.000 / 1M | $2.960 / 1M |
| Total de tokens de entrada | 298,512 | 87,682 |
| Tokens de saída | 3,178 | 7,166 |
| Tokens de raciocínio | 177,419 | 106,027 |
| Tempo de resposta (médio) | 7.61s | 19.40s |
| Tempo de resposta (máx.) | 86.84s | 209.15s |
| Tempo de resposta (total) | 175.08s | 446.11s |
| Parâmetros | ~100B | ~700B no total (~72B ativos) |
| Disponibilidade | Código fechado | Código fechado |
Geração showcase de modelos
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#194 Mercury 2.5 Preview
high- Custo
- $0.001
- Tempo
- 4.5s
- Tokens
- 3,851 tok
#191 KAT-Coder-Pro V2.5
low- Custo
- $0.016
- Tempo
- 47.6s
- Tokens
- 5,182 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Tarefas de agentes | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.1 | 3.1 | 66.7% | 1 | 86.84s | 182,753 | 616 | 16,476 | |
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.75s | 0 | 0 | 0 |
| Truques anti-IA | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.09s | 785 | 181 | 7,008 | |
| KAT-Coder-Pro V2.5 | 6.9 | 5.8 | 75.0% | 2 | 4.20s | 672 | 277 | 4,228 |
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.7 | 7.8 | 55.6% | 1 | 6.13s | 7,751 | 485 | 42,569 | |
| KAT-Coder-Pro V2.5 | 7.8 | 10.0 | 66.7% | 0 | 24.87s | 7,893 | 402 | 24,945 |
| Combinado | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.8 | 1.6 | 50.0% | 2 | 14.36s | 95,789 | 765 | 54,789 | |
| KAT-Coder-Pro V2.5 | 6.4 | 5.8 | 66.7% | 1 | 111.87s | 60,055 | 5,393 | 43,732 |
| Análise e extração de dados | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 2.24s | 8,292 | 560 | 8,522 | |
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.19s | 7,776 | 288 | 1,917 |
| Específico do domínio | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 2.9 | 4.4 | 22.2% | 2 | 5.68s | 857 | 67 | 25,958 | |
| KAT-Coder-Pro V2.5 | 3.5 | 4.4 | 33.3% | 2 | 22.86s | 780 | 35 | 21,430 |
| Inteligência geral | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.1 | 10.0 | 0.0% | 0 | 1.88s | 542 | 94 | 3,300 | |
| KAT-Coder-Pro V2.5 | 4.1 | 2.7 | 33.3% | 1 | 2.32s | 516 | 99 | 412 |
| Seguimento de instruções | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 9.8 | 10.0 | 100.0% | 0 | 1.05s | 741 | 94 | 3,777 | |
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 2.53s | 699 | 83 | 1,008 |
| Resolução de quebra-cabeças | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.21s | 774 | 292 | 6,066 | |
| KAT-Coder-Pro V2.5 | 6.4 | 4.4 | 77.8% | 2 | 3.11s | 696 | 289 | 1,820 |
| Chamada de ferramentas | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 2.25s | 0 | 0 | 0 | |
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 18.45s | 8,391 | 282 | 834 |
| Conhecimentos gerais | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 5.41s | 228 | 24 | 8,954 | |
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 17.06s | 204 | 18 | 5,701 |
Comparação rápida
Trocar par de comparação
Mercury 2.5 PreviewhighvsQwen3.6 35B A3BmediumKAT-Coder-Pro V2.5lowvsStep 3.7 FlashhighMercury 2.5 PreviewhighvsGLM 5.3lowClaude Sonnet 5.5mediumvsMercury 2.5 PreviewhighMercury 2mediumvsKAT-Coder-Pro V2.5lowMercury 2.5 PreviewhighvsGLM 5.1noneClaude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5lowMercury 2.5 PreviewhighvsGrok 4.3mediumKAT-Coder-Pro V2.5lowvsQwen3.6 35B A3BmediumMercury 2.5 PreviewhighvsLaguna XS 2.1mediumDisponível grátisMercury 2.5 PreviewhighvsQwen3.5-122B-A10BnoneKAT-Coder-Pro V2.5lowvsQwen3.7 Flashmedium