Ember-1 (max) vs GPT-5.4 Mini

Modelos comparados

Modelo recomendado GPT-5.4 Mini

Tem a melhor pontuação aqui (5.9) e custa cerca de 29.4x menos que Ember-1 (max).

Métrica	Ember-1 Ember-1 max Lançamento: 2026-09-28	GPT-5.4 Mini GPT-5.4 Mini none Lançamento: 2026-03-17

Métrica	Ember-1 Ember-1 max Lançamento: 2026-09-28	GPT-5.4 Mini GPT-5.4 Mini none Lançamento: 2026-03-17
Pontuação	5.9	5.9
Posição	#248	#251
Confiabilidade	7.5	10.0
Consistência	7.7	9.3
Tentativas	66/66	66/66
Testes corretos
Taxa de acerto por tentativa	57.6%	31.8%
Testes instáveis	6	2
Execuções totais	66	66
Custo por resultado	27.915	1.581
Custo total	$2.792	$0.095
Preço de entrada	$3.000 / 1M	$0.750 / 1M
Preço de saída	$15.000 / 1M	$4.500 / 1M
Total de tokens de entrada	26,449	79,076
Tokens de saída	4,183	7,898
Tokens de raciocínio	176,623	0
Tempo de resposta (médio)	98.92s	1.58s
Tempo de resposta (máx.)	587.08s	9.92s
Tempo de resposta (total)	2176.20s	34.86s
Parâmetros	~2.8T no total (~104B ativos)	~400B no total (~17B ativos)
Disponibilidade	Código fechado	Código fechado

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

max

none

Categoria:

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	8.7	7.9	91.7%	1		23.74s	1,533	613	1,394
GPT-5.4 Mini	3.1	8.1	8.3%	1		929ms	606	654	0

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	5.2	4.4	55.6%	2		105.09s	3,362	1,149	27,957
GPT-5.4 Mini	5.5	10.0	33.3%	0		913ms	7,305	401	0

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	6.5	10.0	50.0%	0		64.37s	12,819	775	4,538
GPT-5.4 Mini	6.5	10.0	50.0%	0		6.22s	55,842	5,637	0

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	6.4	5.9	66.7%	1		39.79s	4,285	185	1,182
GPT-5.4 Mini	10.0	10.0	100.0%	0		1.30s	7,140	222	0

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	3.6	7.2	22.2%	1		471.21s	1,015	84	136,143
GPT-5.4 Mini	3.6	7.2	22.2%	1		1.31s	732	106	0

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	10.0	10.0	100.0%	0		7.04s	741	193	716
GPT-5.4 Mini	4.8	10.0	0.0%	0		1.82s	477	174	0

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	6.2	5.8	66.7%	1		32.97s	777	132	574
GPT-5.4 Mini	6.3	10.0	50.0%	0		728ms	660	101	0

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	7.7	10.0	66.7%	0		6.57s	1,443	681	1,368
GPT-5.4 Mini	5.4	10.0	33.3%	0		836ms	642	305	0

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	3.0	10.0	0.0%	0		26.36s	0	0	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.32s	5,477	255	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	3.0	10.0	0.0%	0		24.95s	474	371	2,751
GPT-5.4 Mini	3.0	10.0	0.0%	0		1.33s	195	43	0

Trocar par de comparação