Navegação
Advertise here

ERNIE-Light-DT-1.0 (low) vs Mercury 2.5 (medium)

A pontuação média está praticamente empatada em 6.4 vs 6.4. Mercury 2.5 (medium) tem menor custo de benchmark com $0.034 vs $0.489. Mercury 2.5 (medium) é mais rápido com 7.74s vs 8.91s, com taxas de acerto de 65.2% vs 63.8%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-11-13

Modelos comparados

Posição
#288
Total de tokens de saída
43,895
Tempo de resposta (médio)
8.91s
Custo total
$0.489
Posição
#286
Total de tokens de saída
138,946
Tempo de resposta (médio)
7.74s
Custo total
$0.034
Modelo recomendado Mercury 2.5 (medium)

Tem a melhor pontuação aqui (6.4) e custa cerca de 14.6x menos que ERNIE-Light-DT-1.0 (low).

Comparação detalhada

Métrica ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low Lançamento: 2026-11-12 Mercury 2.5 Mercury 2.5 medium Lançamento: 2026-09-08
Pontuação 6.4 6.4
Posição #288 #286
Confiabilidade 9.3 9.7
Consistência 7.0 8.3
Tentativas 69/69 69/69
Testes corretos
Taxa de acerto por tentativa 65.2% 63.8%
Testes instáveis 9 5
Execuções totais 69 69
Custo por resultado 4.441 0.280
Custo total $0.489 $0.034
Preço de entrada $1.130 / 1M $0.040 / 1M
Preço de saída $3.941 / 1M $0.150 / 1M
Preço de leitura do cache $0.113 / 1M $0.004 / 1M
Preço de escrita no cache N/D N/D
Total de tokens de entrada 279,234 317,982
Tokens de saída 13,328 3,918
Tokens de raciocínio 30,567 135,028
Tempo de resposta (médio) 8.91s 7.74s
Tempo de resposta (máx.) 96.92s 107.89s
Tempo de resposta (total) 204.98s 178.07s
Parâmetros ~320B no total (~18B ativos) ~100B
Disponibilidade Código fechado Código fechado

Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
Custo
$0.005
Tempo
7.7s
Tokens
1,177 tok

#286 Mercury 2.5

medium
Custo
$0.001
Tempo
3.8s
Tokens
3,386 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

Trocar par de comparação