Navegação
Advertise here

ERNIE-Light-DT-1.0 (low) vs Beam 1.0 501B A23B (low)

A pontuação média está praticamente empatada em 6.4 vs 6.4. Beam 1.0 501B A23B (low) tem menor custo de benchmark com $0.432 vs $0.489. Beam 1.0 501B A23B (low) é mais rápido com 4.89s vs 8.91s, com taxas de acerto de 65.2% vs 60.9%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-11-13

Modelos comparados

Posição
#288
Total de tokens de saída
43,895
Tempo de resposta (médio)
8.91s
Custo total
$0.489
Posição
#285
Total de tokens de saída
71,250
Tempo de resposta (médio)
4.89s
Custo total
$0.432
Modelo recomendado Beam 1.0 501B A23B (low)

Tem a melhor pontuação aqui (6.4) e responde cerca de 1.8x mais rápido que ERNIE-Light-DT-1.0 (low).

Comparação detalhada

Métrica ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low Lançamento: 2026-11-12 Beam 1.0 501B A23B Beam 1.0 501B A23B low Lançamento: 2026-10-17
Pontuação 6.4 6.4
Posição #288 #285
Confiabilidade 9.3 10.0
Consistência 7.0 8.0
Tentativas 69/69 69/69
Testes corretos
Taxa de acerto por tentativa 65.2% 60.9%
Testes instáveis 9 6
Execuções totais 69 69
Custo por resultado 4.441 3.926
Custo total $0.489 $0.432
Preço de entrada $1.130 / 1M $1.000 / 1M
Preço de saída $3.941 / 1M $3.000 / 1M
Preço de leitura do cache $0.113 / 1M $0.100 / 1M
Preço de escrita no cache N/D N/D
Total de tokens de entrada 279,234 218,076
Tokens de saída 13,328 4,863
Tokens de raciocínio 30,567 66,387
Tempo de resposta (médio) 8.91s 4.89s
Tempo de resposta (máx.) 96.92s 29.49s
Tempo de resposta (total) 204.98s 112.55s
Parâmetros ~320B no total (~18B ativos) 501B no total (23B ativos)
Disponibilidade Código fechado Código aberto

Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
Custo
$0.005
Tempo
7.7s
Tokens
1,177 tok

#285 Beam 1.0 501B A23B

low
Custo
$0.006
Tempo
12.0s
Tokens
4,777 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 7.29s 7,791 569 17,401

Trocar par de comparação