Seed-2.0-Code (high) vs GLM 5.1 (medium)

Modelos comparados

Modelo recomendado GLM 5.1 (medium)

Tem a melhor pontuação aqui (7.5) e responde cerca de 1.9x mais rápido que Seed-2.0-Code (high).

Métrica	Seed-2.0-Code Seed-2.0-Code high Lançamento: 2026-08-12	GLM 5.1 GLM 5.1 medium Lançamento: 2026-04-07

Métrica	Seed-2.0-Code Seed-2.0-Code high Lançamento: 2026-08-12	GLM 5.1 GLM 5.1 medium Lançamento: 2026-04-07
Pontuação	7.5	7.5
Posição	#121	#119
Confiabilidade	9.0	9.2
Consistência	7.9	8.4
Tentativas	69/69	69/69
Testes corretos
Taxa de acerto por tentativa	65.2%	66.7%
Testes instáveis	5	4
Execuções totais	69	69
Custo por resultado	12.061	9.004
Custo total	$1.448	$1.066
Preço de entrada	$0.500 / 1M	$0.965 / 1M
Preço de saída	$3.000 / 1M	$3.032 / 1M
Total de tokens de entrada	297,321	331,577
Tokens de saída	8,997	17,919
Tokens de raciocínio	423,853	230,789
Tempo de resposta (médio)	124.87s	66.38s
Tempo de resposta (máx.)	675.30s	308.75s
Tempo de resposta (total)	2871.96s	1460.31s
Parâmetros	~200B no total (~20B ativos)	744B no total (40B ativos)
Disponibilidade	Código fechado	Código aberto

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

medium

Reached the allocated time limit (300 seconds) without receiving showcase output.

Categoria:

Tarefas de agentes	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	10.0	10.0	100.0%	0		139.94s	215,351	1,811	20,464
GLM 5.1	10.0	10.0	100.0%	0		225.59s	248,985	1,830	30,989

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	8.3	10.0	75.0%	0		35.07s	906	1,204	17,533
GLM 5.1	10.0	10.0	100.0%	0		8.31s	555	401	5,122

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	6.2	6.5	55.6%	1		266.74s	6,750	432	124,956
GLM 5.1	4.6	3.7	44.5%	2		109.63s	5,702	4,871	37,826

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	7.3	5.8	83.3%	1		144.87s	57,003	4,295	26,889
GLM 5.1	9.8	10.0	100.0%	0		175.93s	66,926	4,761	65,248

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	10.0	10.0	100.0%	0		24.28s	8,034	246	4,782
GLM 5.1	10.0	10.0	100.0%	0		9.33s	7,107	991	4,552

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	3.5	4.4	33.3%	2		419.73s	828	10	212,349
GLM 5.1	3.0	10.0	0.0%	0		113.95s	458	969	74,651

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	4.6	7.8	0.0%	0		36.45s	382	131	2,577
GLM 5.1	10.0	10.0	100.0%	0		20.95s	477	2,875	2,875

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	9.8	10.0	100.0%	0		11.26s	816	72	2,661
GLM 5.1	6.4	5.8	66.7%	1		7.47s	634	204	1,617

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	7.8	9.3	66.7%	0		15.91s	786	585	4,473
GLM 5.1	8.2	7.2	88.9%	1		31.64s	609	935	5,730

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	4.7	1.6	66.7%	1		35.09s	6,198	196	644
GLM 5.1	3.0	10.0	0.0%	0		0ms	0	0	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Seed-2.0-Code	3.0	10.0	0.0%	0		52.23s	267	15	6,525
GLM 5.1	3.0	10.0	0.0%	0		29.40s	124	82	2,179

Trocar par de comparação