Navegação
Advertise here

Ember-1 (max) vs GPT-5.4

Ember-1 (max) lidera na pontuação média com 5.9 vs 5.8. GPT-5.4 tem menor custo de benchmark com $0.397 vs $2.792. GPT-5.4 é mais rápido com 2.08s vs 98.92s, com taxas de acerto de 57.6% vs 34.9%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-09-28

Modelos comparados

Posição
#248
Total de tokens de saída
180,806
Tempo de resposta (médio)
98.92s
Custo total
$2.792
Posição
#254
Total de tokens de saída
8,339
Tempo de resposta (médio)
2.08s
Custo total
$0.397
Modelo recomendado GPT-5.4

A pontuação fica perto da melhor aqui (5.8 vs 5.9) e custa cerca de 7.0x menos que Ember-1 (max).

Comparação detalhada

Métrica Ember-1 Ember-1 max Lançamento: 2026-09-28 GPT-5.4 GPT-5.4 none Lançamento: 2026-03-05
Pontuação 5.9 5.8
Posição #248 #254
Confiabilidade 7.5 10.0
Consistência 7.7 9.2
Tentativas 66/66 66/66
Testes corretos
Taxa de acerto por tentativa 57.6% 34.9%
Testes instáveis 6 2
Execuções totais 66 66
Custo por resultado 27.915 5.667
Custo total $2.792 $0.397
Preço de entrada $3.000 / 1M $2.500 / 1M
Preço de saída $15.000 / 1M $15.000 / 1M
Total de tokens de entrada 26,449 108,641
Tokens de saída 4,183 8,339
Tokens de raciocínio 176,623 0
Tempo de resposta (médio) 98.92s 2.08s
Tempo de resposta (máx.) 587.08s 15.63s
Tempo de resposta (total) 2176.20s 45.75s
Parâmetros ~2.8T no total (~104B ativos) ~1.5T no total (~100B ativos)
Disponibilidade Código fechado Código fechado

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
Custo
$0.163
Tempo
229.4s
Tokens
11,002 tok

#254 GPT-5.4

none
Custo
$0.026
Tempo
18.1s
Tokens
1,792 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0

Comparação rápida

Trocar par de comparação