Ember-1 (high) vs Gemma 4 31B (medium)

Modelos comparados

Modelo recomendado Gemma 4 31B (medium)

Tem a melhor pontuação aqui (6.9) e custa cerca de 20.6x menos que Ember-1 (high).

Métrica	Ember-1 Ember-1 high Lançamento: 2026-09-28	Gemma 4 31B Gemma 4 31B medium Lançamento: 2026-04-02 Disponível grátis

Métrica	Ember-1 Ember-1 high Lançamento: 2026-09-28	Gemma 4 31B Gemma 4 31B medium Lançamento: 2026-04-02 Disponível grátis
Pontuação	6.9	6.9
Posição	#164	#165
Confiabilidade	8.6	10.0
Consistência	7.2	8.7
Tentativas	69/69	69/69
Testes corretos
Taxa de acerto por tentativa	71.0%	66.7%
Testes instáveis	8	3
Execuções totais	69	69
Custo por resultado	20.041	1.195
Custo total	$2.405	$0.117
Preço de entrada	$3.000 / 1M	$0.090 / 1M
Preço de saída	$15.000 / 1M	$0.340 / 1M
Total de tokens de entrada	195,489	251,164
Tokens de saída	12,475	36,112
Tokens de raciocínio	108,748	241,203
Tempo de resposta (médio)	58.14s	78.76s
Tempo de resposta (máx.)	255.06s	437.40s
Tempo de resposta (total)	1337.19s	1653.96s
Parâmetros	~2.8T no total (~104B ativos)	30.7B
Disponibilidade	Código fechado	Código aberto

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

medium

Categoria:

Tarefas de agentes	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	6.1	3.1	66.7%	1		88.31s	146,912	5,130	5,968
Gemma 4 31B	10.0	10.0	100.0%	0		82.13s	156,195	1,713	8,181

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	8.7	7.9	91.7%	1		24.05s	1,544	886	992
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	8.2	7.2	88.9%	1		72.23s	7,144	1,281	23,093
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	6.4	5.8	66.7%	1		79.89s	28,994	1,667	6,614
Gemma 4 31B	2.9	5.8	16.7%	1		433.11s	77,035	12,112	157,552

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	7.3	5.9	83.3%	1		36.10s	6,076	230	1,228
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	2.9	4.4	22.2%	2		175.49s	1,154	1,023	61,582
Gemma 4 31B	5.3	7.2	44.4%	1		59.92s	853	4,280	18,729

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	10.0	10.0	100.0%	0		4.49s	744	194	304
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	7.1	5.8	83.3%	1		33.38s	992	162	784
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	10.0	10.0	100.0%	0		4.84s	1,452	390	848
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	3.0	10.0	0.0%	0		26.45s	0	0	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Ember-1	3.0	10.0	0.0%	0		65.34s	477	1,512	7,335
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Trocar par de comparação