#30 Claude Sonnet 4.6
medium- Custo
- $0.000
- Tempo
- 300.0s
- Tokens
- 0 tok
Resumo
Claude Sonnet 4.6 marca 8.0 no AI BENCHY e fica em #30. Tem fiabilidade N/D, taxa de acerto de 74.1%, custo total de $1.161 e tempo médio de resposta de 12.66s.
Pesquisado em 2026-08-12
Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.
8.0
Consistência
9.5
$1.161
Total de tokens de saída
68,852
Total de tokens de entrada
0
Preço de entrada
$3.000 / 1M
Preço de saída
$15.000 / 1M
Testes instáveis
1
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
12.66s
Tempo de resposta (máx.): 46.35s
Tempo de resposta (total): 126.62s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-08-14 02:03 Novo teste | 7.8 | 10.0 | $2.126 | Comparar | |
| 2026-07-16 22:27 Novo teste adicionado | 7.8 | 10.0 | $2.057 | Comparar | |
| 2026-06-04 13:42 Novo teste adicionado | 7.4 | 10.0 | $1.418 | Comparar | |
| 2026-05-22 00:14 Suite alterada | 7.6 | 10.0 | $1.330 | Comparar | |
| 2026-04-11 01:44 Primeira execução registrada | 8.0 | N/D | $1.161 | Execução atual |
Comparação de execuções
| Execução | Cobertura do benchmark | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · Primeira execução registrada | 54/54 tentativas | 8.0 | 9.5 | N/D | 13/18 | 1 | 68,852 | 0 | $1.161 | 12.66s |
| 2026-07-16 22:27 · Novo teste adicionado | 66/66 tentativas | 7.8 | 9.2 | 10.0 | 14/22 | 2 | 115,865 | 106,292 | $2.057 | 25.91s |
| Diferença | — | +0.2 | +0.3 | -1 | -1 | -47013 | -106292 | -$0.896 | -13251ms |
A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 66/66 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 6.5 | 10.0 | |
| Programação | 10.0 | 10.0 | |
| Combinado | 10.0 | 10.0 | |
| Análise e extração de dados | 10.0 | 10.0 | |
| Específico do domínio | 2.9 | 7.2 | |
| Inteligência geral | 10.0 | 10.0 | |
| Seguimento de instruções | 10.0 | 10.0 | |
| Resolução de quebra-cabeças | 10.0 | 10.0 | |
| Chamada de ferramentas | 10.0 | 10.0 |