Claude Opus 4.8 vs Ember-1 (high)

Modelos comparados

Modelo recomendado Claude Opus 4.8

Tem a melhor pontuação aqui (6.9) e responde cerca de 7.7x mais rápido que Ember-1 (high).

Métrica	Claude Opus 4.8 Claude Opus 4.8 none Lançamento: 2026-05-28	Ember-1 Ember-1 high Lançamento: 2026-09-28

Métrica	Claude Opus 4.8 Claude Opus 4.8 none Lançamento: 2026-05-28	Ember-1 Ember-1 high Lançamento: 2026-09-28
Pontuação	6.9	6.9
Posição	#167	#163
Confiabilidade	10.0	8.6
Consistência	9.3	7.2
Tentativas	69/69	69/69
Testes corretos
Taxa de acerto por tentativa	60.9%	71.0%
Testes instáveis	2	8
Execuções totais	69	69
Custo por resultado	17.953	20.041
Custo total	$2.334	$2.405
Preço de entrada	$5.000 / 1M	$3.000 / 1M
Preço de saída	$25.000 / 1M	$15.000 / 1M
Total de tokens de entrada	345,059	195,489
Tokens de saída	24,343	12,475
Tokens de raciocínio	0	108,748
Tempo de resposta (médio)	7.54s	58.14s
Tempo de resposta (máx.)	65.07s	255.06s
Tempo de resposta (total)	173.31s	1337.19s
Parâmetros	~5T no total (~500B ativos)	~2.8T no total (~104B ativos)
Disponibilidade	Código fechado	Código fechado

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

high

Categoria:

Tarefas de agentes	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.0	10.0	0.0%	0		65.07s	195,856	7,546	0
Ember-1	6.1	3.1	66.7%	1		88.31s	146,912	5,130	5,968

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	6.5	10.0	50.0%	0		3.40s	834	1,472	0
Ember-1	8.7	7.9	91.7%	1		24.05s	1,544	886	992

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.5	10.0	33.3%	0		3.29s	10,590	1,332	0
Ember-1	8.2	7.2	88.9%	1		72.23s	7,144	1,281	23,093

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	9.8	10.0	100.0%	0		26.38s	111,760	11,949	0
Ember-1	6.4	5.8	66.7%	1		79.89s	28,994	1,667	6,614

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	7.3	5.8	83.3%	1		1.77s	10,503	308	0
Ember-1	7.3	5.9	83.3%	1		36.10s	6,076	230	1,228

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.3	7.2	44.4%	1		1.76s	972	61	0
Ember-1	2.9	4.4	22.2%	2		175.49s	1,154	1,023	61,582

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	10.0	10.0	100.0%	0		3.48s	708	230	0
Ember-1	10.0	10.0	100.0%	0		4.49s	744	194	304

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	9.9	10.0	100.0%	0		1.37s	909	95	0
Ember-1	7.1	5.8	83.3%	1		33.38s	992	162	784

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	7.7	10.0	66.7%	0		2.74s	894	783	0
Ember-1	10.0	10.0	100.0%	0		4.84s	1,452	390	848

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	10.0	10.0	100.0%	0		5.35s	11,775	355	0
Ember-1	3.0	10.0	0.0%	0		26.45s	0	0	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	3.0	10.0	0.0%	0		3.41s	258	212	0
Ember-1	3.0	10.0	0.0%	0		65.34s	477	1,512	7,335

Trocar par de comparação