Navegação
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (medium)

Nemotron 3.5 Lightning (medium) lidera na pontuação média com 4.7 vs 4.4. Mercury 2 tem menor custo de benchmark com $0.033 vs $0.129. Mercury 2 é mais rápido com 1.18s vs 81.93s, com taxas de acerto de 23.2% vs 47.8%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-10-01

Modelos comparados

Posição
#338
Total de tokens de saída
9,709
Tempo de resposta (médio)
1.18s
Custo total
$0.033
Posição
#315
Total de tokens de saída
766,130
Tempo de resposta (médio)
81.93s
Custo total
$0.129
Modelo recomendado Mercury 2

A pontuação fica perto da melhor aqui (4.4 vs 4.7) e custa cerca de 4.0x menos que Nemotron 3.5 Lightning (medium).

Comparação detalhada

Métrica Mercury 2 Mercury 2 none Lançamento: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Lançamento: 2026-08-11 Disponível grátis
Pontuação 4.4 4.7
Posição #338 #315
Confiabilidade 10.0 9.8
Consistência 9.2 5.8
Tentativas 69/69 69/69
Testes corretos
Taxa de acerto por tentativa 23.2% 47.8%
Testes instáveis 2 12
Execuções totais 69 69
Custo por resultado 0.812 0.000
Custo total $0.033 $0.129
Preço de entrada $0.250 / 1M $0.060 / 1M
Preço de saída $0.750 / 1M $0.160 / 1M
Total de tokens de entrada 100,634 195,780
Tokens de saída 9,709 167,746
Tokens de raciocínio 0 598,384
Tempo de resposta (médio) 1.18s 81.93s
Tempo de resposta (máx.) 9.00s 437.11s
Tempo de resposta (total) 27.14s 1884.31s
Parâmetros ~100B 30B no total (3B ativos)
Disponibilidade Código fechado Pesos disponíveis

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#338 Mercury 2

none
Custo
$0.002
Tempo
1.8s
Tokens
1,514 tok

#315 Nemotron 3.5 Lightning

medium
Custo
$0.000
Tempo
130.5s
Tokens
6,750 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

Comparação rápida

Trocar par de comparação