Claude Opus 4.8 vs Ember-1 (low)

Modelos comparados

Modelo recomendado Claude Opus 4.8

A pontuação fica perto da melhor aqui (6.9 vs 7.0) e responde cerca de 4.6x mais rápido que Ember-1 (low).

Métrica	Claude Opus 4.8 Claude Opus 4.8 none Lançamento: 2026-05-28	Ember-1 Ember-1 low Lançamento: 2026-09-28

Métrica	Claude Opus 4.8 Claude Opus 4.8 none Lançamento: 2026-05-28	Ember-1 Ember-1 low Lançamento: 2026-09-28
Pontuação	6.9	7.0
Posição	#167	#157
Confiabilidade	10.0	8.8
Consistência	9.3	8.2
Tentativas	69/69	69/69
Testes corretos
Taxa de acerto por tentativa	60.9%	65.2%
Testes instáveis	2	5
Execuções totais	69	69
Custo por resultado	17.953	11.441
Custo total	$2.334	$1.488
Preço de entrada	$5.000 / 1M	$3.000 / 1M
Preço de saída	$25.000 / 1M	$15.000 / 1M
Total de tokens de entrada	345,059	211,908
Tokens de saída	24,343	14,158
Tokens de raciocínio	0	42,608
Tempo de resposta (médio)	7.54s	34.90s
Tempo de resposta (máx.)	65.07s	121.29s
Tempo de resposta (total)	173.31s	802.79s
Parâmetros	~5T no total (~500B ativos)	~2.8T no total (~104B ativos)
Disponibilidade	Código fechado	Código fechado

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

low

Categoria:

Tarefas de agentes	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.0	10.0	0.0%	0		65.07s	195,856	7,546	0
Ember-1	4.7	3.1	33.3%	1		121.29s	178,897	9,378	9,921

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	6.5	10.0	50.0%	0		3.40s	834	1,472	0
Ember-1	8.2	7.9	83.3%	1		22.18s	1,402	571	613

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.5	10.0	33.3%	0		3.29s	10,590	1,332	0
Ember-1	10.0	10.0	100.0%	0		37.91s	8,097	2,518	13,142

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	9.8	10.0	100.0%	0		26.38s	111,760	11,949	0
Ember-1	6.5	10.0	50.0%	0		51.45s	12,828	381	689

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	7.3	5.8	83.3%	1		1.77s	10,503	308	0
Ember-1	7.3	5.9	83.3%	1		34.82s	6,076	223	778

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	5.3	7.2	44.4%	1		1.76s	972	61	0
Ember-1	2.9	7.2	11.1%	1		56.17s	1,154	234	12,476

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	10.0	10.0	100.0%	0		3.48s	708	230	0
Ember-1	10.0	10.0	100.0%	0		5.67s	744	139	462

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	9.9	10.0	100.0%	0		1.37s	909	95	0
Ember-1	6.2	5.8	66.7%	1		32.73s	781	121	466

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	7.7	10.0	66.7%	0		2.74s	894	783	0
Ember-1	10.0	10.0	100.0%	0		3.27s	1,452	393	595

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	10.0	10.0	100.0%	0		5.35s	11,775	355	0
Ember-1	3.0	10.0	0.0%	0		26.43s	0	0	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Opus 4.8	3.0	10.0	0.0%	0		3.41s	258	212	0
Ember-1	3.0	10.0	0.0%	0		30.60s	477	200	3,466

Trocar par de comparação