AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Z.ai: GLM 5.1

Resumo

Comparação benchmark Claude Sonnet 4.6 vs GLM 5.1: Claude Sonnet 4.6 lidera na pontuação média com 7.3 vs 7.1. GLM 5.1 tem menor custo de benchmark com $0.292 vs $0.316. Claude Sonnet 4.6 é mais rápido com 5.04s vs 33.67s, com taxas de acerto de 55.6% vs 68.3%.

Modelo recomendado: Claude Sonnet 4.6 - Tem a melhor pontuação aqui (7.3) e responde cerca de 6.7x mais rápido que GLM 5.1.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-12

Métrica	Claude Sonnet 4.6 Claude Sonnet 4.6 none Lançamento: 2026-02-17	GLM 5.1 GLM 5.1 medium Lançamento: 2026-04-07

Métrica	Claude Sonnet 4.6 Claude Sonnet 4.6 none Lançamento: 2026-02-17	GLM 5.1 GLM 5.1 medium Lançamento: 2026-04-07
Pontuação	7.3	7.1
Posição	#56	#64
Confiabilidade	10.0	6.7
Consistência	9.7	8.3
Testes corretos
Taxa de acerto por tentativa	55.6%	68.3%
Testes instáveis	1	4
Execuções totais	63	63
Custo por resultado	2.870	2.496
Custo total	$0.316	$0.292
Preço de entrada	$3.000 / 1M	$0.980 / 1M
Preço de saída	$15.000 / 1M	$3.080 / 1M
Total de tokens de entrada	57,886	32,995
Tokens de saída	9,465	11,655
Tokens de raciocínio	0	75,421
Tempo de resposta (médio)	5.04s	33.67s
Tempo de resposta (máx.)	23.84s	172.60s
Tempo de resposta (total)	70.60s	673.41s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Claude Sonnet 4.6

none

Cost: $0.038
Time: 27.3s
Tokens: 2,598 tok

#64 GLM 5.1

medium

Invalid SVG

Cost: $0.000
Time: 300.0s
Tokens: 0 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	4.8	10.0	25.0%	0		2.94s	636	1,214	0
GLM 5.1	10.0	10.0	100.0%	0		8.31s	555	401	5,122

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	5.5	10.0	33.3%	0		5.19s	8,522	2,127	0
GLM 5.1	4.6	3.7	44.5%	2		109.63s	5,702	4,871	37,826

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	9.5	10.0	100.0%	0		23.84s	26,024	3,766	0
GLM 5.1	9.5	10.0	100.0%	0		43.11s	17,298	327	4,206

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	10.0	10.0	100.0%	0		3.43s	8,574	252	0
GLM 5.1	10.0	10.0	100.0%	0		9.33s	7,107	991	4,552

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	7.7	10.0	66.7%	0		3.54s	759	413	0
GLM 5.1	5.3	10.0	33.3%	0		29.77s	489	969	11,314

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	6.1	3.1	66.7%	1		2.56s	513	192	0
GLM 5.1	10.0	10.0	100.0%	0		20.95s	477	2,875	2,875

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	6.5	10.0	50.0%	0		1.96s	690	90	0
GLM 5.1	6.4	5.8	66.7%	1		7.47s	634	204	1,617

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.53s	663	533	0
GLM 5.1	8.2	7.2	88.9%	1		31.64s	609	935	5,730

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.11s	11,301	447	0
GLM 5.1	3.0	10.0	0.0%	0		0ms	0	0	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Claude Sonnet 4.6	3.0	10.0	0.0%	0		4.67s	204	431	0
GLM 5.1	3.0	10.0	0.0%	0		29.40s	124	82	2,179

Comparação rápida

Trocar par de comparação