Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemma 4 26B A4B

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-05-19

Métrica Claude Sonnet 4.6 Claude Sonnet 4.6 none Lançamento: 2026-02-17 Gemma 4 26B A4B Gemma 4 26B A4B medium Lançamento: 2026-04-03 Disponível grátis
Pontuação 7.2 7.7
Posição #68 #43
Confiabilidade 10.0 10.0
Consistência 9.6 8.7
Testes corretos
Taxa de acerto por tentativa 61.4% 73.7%
Testes instáveis 1 3
Execuções totais 57 57
Custo por resultado 2.441 0.260
Custo total $0.269 $0.034
Preço de entrada $3.000 / 1M $0.060 / 1M
Preço de saída $15.000 / 1M $0.330 / 1M
Tokens de saída 7,864 16,725
Tokens de raciocínio 0 61,536
Tempo de resposta (médio) 4.96s 33.69s
Tempo de resposta (máx.) 23.84s 180.87s
Tempo de resposta (total) 59.50s 606.35s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 4.8 10.0 25.0% 0 2.94s 1,214 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 6.20s 1,142 3,045
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.67s 523 0
Gemma 4 26B A4B 2.8 10.0 0.0% 0 147.47s 3,516 4,676
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 9.5 10.0 100.0% 0 23.84s 3,766 0
Gemma 4 26B A4B 9.6 10.0 100.0% 0 73.55s 5,415 13,112
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.43s 252 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 16.51s 1,567 2,827
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 7.7 10.0 66.7% 0 3.54s 413 0
Gemma 4 26B A4B 2.9 4.4 22.2% 2 23.62s 2,469 7,105
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 6.1 3.1 66.7% 1 2.56s 192 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 29.76s 25 5,075
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 6.5 10.0 50.0% 0 1.96s 90 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 17.54s 887 4,470
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 7.7 10.0 66.7% 0 2.92s 536 0
Gemma 4 26B A4B 7.7 7.3 77.8% 1 8.52s 457 3,065
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.11s 447 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 9.01s 450 1,256
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 3.0 10.0 0.0% 0 4.67s 431 0
Gemma 4 26B A4B 3.0 10.0 0.0% 0 180.87s 797 16,905

Comparação rápida

Trocar par de comparação