Navegação
Advertise here

Ember-1 (high) vs GLM 5.1 (medium)

Ember-1 (high) lidera na pontuação média com 7.1 vs 7.0. GLM 5.1 (medium) tem menor custo de benchmark com $1.053 vs $1.798. Ember-1 (high) é mais rápido com 56.77s vs 58.80s, com taxas de acerto de 71.2% vs 65.2%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-09-28

Modelos comparados

Posição
#158
Total de tokens de saída
110,125
Tempo de resposta (médio)
56.77s
Custo total
$1.798
Posição
#164
Total de tokens de saída
215,889
Tempo de resposta (médio)
58.80s
Custo total
$1.053
Modelo recomendado GLM 5.1 (medium)

A pontuação fica perto da melhor aqui (7.0 vs 7.1) e custa cerca de 1.7x menos que Ember-1 (high).

Comparação detalhada

Métrica Ember-1 Ember-1 high Lançamento: 2026-09-28 GLM 5.1 GLM 5.1 medium Lançamento: 2026-04-07
Pontuação 7.1 7.0
Posição #158 #164
Confiabilidade 8.0 8.1
Consistência 7.3 8.4
Tentativas 66/66 66/66
Testes corretos
Taxa de acerto por tentativa 71.2% 65.2%
Testes instáveis 7 4
Execuções totais 66 66
Custo por resultado 14.981 6.923
Custo total $1.798 $1.053
Preço de entrada $3.000 / 1M $1.400 / 1M
Preço de saída $15.000 / 1M $4.400 / 1M
Total de tokens de entrada 48,577 82,592
Tokens de saída 7,345 16,089
Tokens de raciocínio 102,780 199,800
Tempo de resposta (médio) 56.77s 58.80s
Tempo de resposta (máx.) 255.06s 308.75s
Tempo de resposta (total) 1248.88s 1234.72s
Parâmetros ~2.8T no total (~104B ativos) 744B no total (40B ativos)
Disponibilidade Código fechado Código aberto

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
Custo
$0.038
Tempo
55.1s
Tokens
2,671 tok

#164 GLM 5.1

medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
Custo
$0.000
Tempo
300.0s
Tokens
0 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
GLM 5.1 4.6 3.7 44.5% 2 109.63s 5,702 4,871 37,826

Comparação rápida

Trocar par de comparação