Navegação
Advertise here

Ember-1 (high) vs Mercury 2.5 (high)

A pontuação média está praticamente empatada em 7.1 vs 7.1. Mercury 2.5 (high) tem menor custo de benchmark com $0.031 vs $1.798. Mercury 2.5 (high) é mais rápido com 4.32s vs 56.77s, com taxas de acerto de 71.2% vs 62.1%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-09-28

Modelos comparados

Posição
#158
Total de tokens de saída
110,125
Tempo de resposta (médio)
56.77s
Custo total
$1.798
Posição
#157
Total de tokens de saída
174,547
Tempo de resposta (médio)
4.32s
Custo total
$0.031
Modelo recomendado Mercury 2.5 (high)

Tem a melhor pontuação aqui (7.1) e custa cerca de 58.0x menos que Ember-1 (high).

Comparação detalhada

Métrica Ember-1 Ember-1 high Lançamento: 2026-09-28 Mercury 2.5 Mercury 2.5 high Lançamento: 2026-09-08
Pontuação 7.1 7.1
Posição #158 #157
Confiabilidade 8.0 9.7
Consistência 7.3 8.6
Tentativas 66/66 66/66
Testes corretos
Taxa de acerto por tentativa 71.2% 62.1%
Testes instáveis 7 4
Execuções totais 66 66
Custo por resultado 14.981 0.259
Custo total $1.798 $0.031
Preço de entrada $3.000 / 1M $0.040 / 1M
Preço de saída $15.000 / 1M $0.150 / 1M
Total de tokens de entrada 48,577 120,068
Tokens de saída 7,345 3,402
Tokens de raciocínio 102,780 171,145
Tempo de resposta (médio) 56.77s 4.32s
Tempo de resposta (máx.) 255.06s 23.63s
Tempo de resposta (total) 1248.88s 95.06s
Parâmetros ~2.8T no total (~104B ativos) ~100B
Disponibilidade Código fechado Código fechado

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
Custo
$0.038
Tempo
55.1s
Tokens
2,671 tok

#157 Mercury 2.5

high
Custo
$0.001
Tempo
3.5s
Tokens
2,447 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012

Comparação rápida

Trocar par de comparação