AI BENCHY
Advertise here
#46

Claude Sonnet 5

Anthropic Lançamento: 2026-06-30 Testado em: 2026-08-14 02:11 anthropic/claude-sonnet-5::medium
~1T no total (~100B ativos)MoECódigo fechadoEstimado
(medium) (none)

Resumo

Claude Sonnet 5 marca 8.2 no AI BENCHY e fica em #46. Tem fiabilidade 10.0, taxa de acerto de 75.8%, custo total de $0.922 e tempo médio de resposta de 12.54s.

O que torna Claude Sonnet 5 único: Destaca-se mais em Seguimento de instruções, onde fica em #3, enquanto Combinado é a área mais fraca em #13.

Dados do modelo

Pesquisado em 2026-08-12

Estimado
Parâmetros
~1T no total (~100B ativos)
Arquitetura
MoE
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Fonte dos parâmetros Fonte da disponibilidade

Pontuação

8.2

Consistência

9.0

Confiabilidade

10.0

Custo total (preço atual)

$0.922

Total de tokens de saída

63,204

Total de tokens de entrada

145,953

Preço de entrada

$2.000 / 1M

Preço de saída

$10.000 / 1M

Testes corretos

Testes errados: 7

Taxa de acerto por tentativa: 75.8%

Testes instáveis

3

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

12.54s

Tempo de resposta (máx.): 66.71s

Tempo de resposta (total): 275.90s

Resposta incorreta: 5 Não seguiu as instruções: 1 Chamada de ferramenta inválida: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 Claude Sonnet 5

medium
Custo
$0.007
Tempo
6.4s
Tokens
832 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-08-14 02:11 Novo teste 8.2 10.0 $0.922 Execução atual
2026-07-16 22:33 Novo teste adicionado 8.3 10.0 $0.922 Comparar
2026-06-30 21:33 Execução inicial 7.9 10.0 $0.550 Comparar

Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.

Histórico de preços

Dados históricos de preços deste modelo da OpenRouter.

Data Preço de entrada Preço de saída
2026-08-14 12:51 $2.000 / 1M $10.000 / 1M

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Claude Sonnet 5mediumvsGemini 2.5 FlashmediumClaude Sonnet 5mediumvsQwen3.8 2.4T A95BlowClaude Sonnet 5mediumvsMuse Spark 1.1lowClaude Sonnet 5mediumvsGPT-5 MinimediumClaude Sonnet 5mediumvsInkling SmallhighClaude Sonnet 5mediumvsMuse Glimmer 30BxhighClaude Sonnet 5mediumvsSeed 2.1 TurbomediumClaude Sonnet 5mediumvsInklinghighClaude Sonnet 5mediumvsGPT-5.2mediumClaude Sonnet 5mediumvsMuse Spark 1.1high

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 9.0 7.9
Combinado 7.3 6.0
Análise e extração de dados 10.0 10.0
Específico do domínio 5.3 10.0
Inteligência geral 4.8 3.2
Seguimento de instruções 9.9 10.0
Resolução de quebra-cabeças 7.7 10.0
Chamada de ferramentas 10.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados