- Posição
- #293
- Total de tokens de saída
- 40,302
- Tempo de resposta (médio)
- 3.34s
- Custo total
- $0.020
Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)
Nemotron 3.5 Lightning (high) lidera na pontuação média com 5.2 vs 5.1. Mercury 2.5 (low) tem menor custo de benchmark com $0.020 vs $0.111. Mercury 2.5 (low) é mais rápido com 3.34s vs 77.08s, com taxas de acerto de 37.7% vs 47.8%.
Modelos comparados
- Posição
- #287
- Total de tokens de saída
- 659,693
- Tempo de resposta (médio)
- 77.08s
- Custo total
- $0.111
Modelo recomendado
Mercury 2.5 (low)
A pontuação fica perto da melhor aqui (5.1 vs 5.2) e custa cerca de 5.8x menos que Nemotron 3.5 Lightning (high).
Comparação detalhada
| Métrica | Mercury 2.5 Mercury 2.5 low | Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Disponível grátis |
|---|---|---|
| Pontuação | 5.1 | 5.2 |
| Posição | #293 | #287 |
| Confiabilidade | 9.8 | 9.6 |
| Consistência | 8.2 | 5.7 |
| Tentativas | 69/69 | 69/69 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 37.7% | 47.8% |
| Testes instáveis | 5 | 12 |
| Execuções totais | 69 | 69 |
| Custo por resultado | 0.319 | 0.000 |
| Custo total | $0.020 | $0.111 |
| Preço de entrada | $0.040 / 1M | $0.060 / 1M |
| Preço de saída | $0.150 / 1M | $0.160 / 1M |
| Total de tokens de entrada | 326,083 | 170,517 |
| Tokens de saída | 7,224 | 149,968 |
| Tokens de raciocínio | 33,078 | 509,725 |
| Tempo de resposta (médio) | 3.34s | 77.08s |
| Tempo de resposta (máx.) | 47.06s | 490.99s |
| Tempo de resposta (total) | 76.80s | 1772.78s |
| Parâmetros | ~100B | 30B no total (3B ativos) |
| Disponibilidade | Código fechado | Pesos disponíveis |
Geração showcase de modelos
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#293 Mercury 2.5
low- Custo
- $0.001
- Tempo
- 2.4s
- Tokens
- 1,236 tok
#287 Nemotron 3.5 Lightning
high- Custo
- $0.000
- Tempo
- 92.8s
- Tokens
- 11,343 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Tarefas de agentes | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.0 | 10.0 | 0.0% | 0 | 47.06s | 188,063 | 1,141 | 5,442 | |
| Nemotron 3.5 Lightning | 3.5 | 8.3 | 0.0% | 0 | 490.99s | 52,501 | 1,624 | 3,472 |
| Truques anti-IA | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 6.9 | 7.9 | 66.7% | 1 | 799ms | 772 | 209 | 2,969 | |
| Nemotron 3.5 Lightning | 5.5 | 3.7 | 66.7% | 3 | 10.29s | 696 | 2,432 | 15,948 |
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.5 | 10.0 | 33.3% | 0 | 972ms | 7,909 | 521 | 2,269 | |
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 168.41s | 7,623 | 68,533 | 242,319 |
| Combinado | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.0 | 10.0 | 0.0% | 0 | 5.16s | 107,683 | 3,750 | 11,351 | |
| Nemotron 3.5 Lightning | 6.4 | 10.0 | 50.0% | 0 | 160.45s | 90,257 | 17,550 | 119,725 |
| Análise e extração de dados | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 6.5 | 10.0 | 50.0% | 0 | 1.06s | 8,322 | 739 | 1,499 | |
| Nemotron 3.5 Lightning | 7.3 | 5.9 | 83.3% | 1 | 13.99s | 7,944 | 3,210 | 16,835 |
| Específico do domínio | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.6 | 7.2 | 22.2% | 1 | 846ms | 851 | 57 | 2,265 | |
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 88.61s | 798 | 45,616 | 72,496 |
| Inteligência geral | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 4.4 | 9.9 | 0.0% | 0 | 819ms | 525 | 99 | 748 | |
| Nemotron 3.5 Lightning | 3.7 | 9.5 | 0.0% | 0 | 7.58s | 516 | 4,331 | 4,408 |
| Seguimento de instruções | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 2.9 | 6.0 | 16.7% | 1 | 972ms | 518 | 48 | 1,026 | |
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 4.98s | 723 | 502 | 3,779 |
| Resolução de quebra-cabeças | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.9 | 4.5 | 66.7% | 2 | 792ms | 768 | 249 | 2,214 | |
| Nemotron 3.5 Lightning | 3.6 | 1.8 | 44.4% | 3 | 6.09s | 726 | 1,236 | 9,851 |
| Chamada de ferramentas | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 9.8 | 10.0 | 100.0% | 0 | 2.72s | 10,440 | 388 | 2,537 | |
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 6.92s | 8,526 | 3,745 | 3,781 |
| Conhecimentos gerais | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.0 | 10.0 | 0.0% | 0 | 782ms | 232 | 23 | 758 | |
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 77.98s | 207 | 1,189 | 17,111 |
Comparação rápida
Trocar par de comparação
Mercury 2.5lowvsKAT Coder AIR V2.5mediumMercury 2.5lowvsMiMo-V2.5-PrononeLing 3.0 FlashnonevsNemotron 3.5 LightninghighDisponível grátisMercury 2.5lowvsMistral Small 4noneMercury 2.5lowvsMistral Small 4mediumNemotron 3.5 LightninghighDisponível grátisvsInkling SmalllowDisponível grátisMistral Small 4mediumvsNemotron 3.5 LightninghighDisponível grátisMercury 2.5lowvsLaguna S 2.1mediumDisponível grátisMistral Small 4nonevsNemotron 3.5 LightninghighDisponível grátisMercury 2.5lowvsKAT Coder AIR V2.5highNemotron 3.5 LightninghighDisponível grátisvsQwen3.6 35B A3BnoneNemotron 3.5 LightninghighDisponível grátisvsLaguna XS 2.1noneDisponível grátis