Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs OpenAI: GPT-5.4 Nano

Resumo

Comparação benchmark Claude Sonnet 4.6 vs GPT-5.4 Nano: GPT-5.4 Nano lidera na pontuação média com 7.5 vs 7.3. GPT-5.4 Nano tem menor custo de benchmark com $0.107 vs $0.316. Claude Sonnet 4.6 é mais rápido com 5.04s vs 11.95s, com taxas de acerto de 55.6% vs 63.5%.

Modelo recomendado: GPT-5.4 Nano - Tem a melhor pontuação aqui (7.5) e custa cerca de 3.0x menos que Claude Sonnet 4.6.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-12

Métrica Claude Sonnet 4.6 Claude Sonnet 4.6 none Lançamento: 2026-02-17 GPT-5.4 Nano GPT-5.4 Nano medium Lançamento: 2026-03-17
Pontuação 7.3 7.5
Posição #56 #48
Confiabilidade 10.0 10.0
Consistência 9.7 8.4
Testes corretos
Taxa de acerto por tentativa 55.6% 63.5%
Testes instáveis 1 4
Execuções totais 63 63
Custo por resultado 2.870 0.969
Custo total $0.316 $0.107
Preço de entrada $3.000 / 1M $0.200 / 1M
Preço de saída $15.000 / 1M $1.250 / 1M
Total de tokens de entrada 57,886 35,434
Tokens de saída 9,465 3,014
Tokens de raciocínio 0 76,520
Tempo de resposta (médio) 5.04s 11.95s
Tempo de resposta (máx.) 23.84s 94.06s
Tempo de resposta (total) 70.60s 250.98s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Claude Sonnet 4.6

none
Cost
$0.038
Time
27.3s
Tokens
2,598 tok

#48 GPT-5.4 Nano

medium
Cost
$0.007
Time
24.6s
Tokens
4,943 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 4.8 10.0 25.0% 0 2.94s 636 1,214 0
GPT-5.4 Nano 8.3 10.0 75.0% 0 4.52s 606 683 2,254
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 5.5 10.0 33.3% 0 5.19s 8,522 2,127 0
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 9.5 10.0 100.0% 0 23.84s 26,024 3,766 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 24.13s 12,345 349 5,719
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.43s 8,574 252 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 2.54s 7,140 234 516
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 7.7 10.0 66.7% 0 3.54s 759 413 0
GPT-5.4 Nano 5.9 7.2 55.6% 1 38.18s 619 60 43,325
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 6.1 3.1 66.7% 1 2.56s 513 192 0
GPT-5.4 Nano 4.5 10.0 0.0% 0 4.15s 477 179 443
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 6.5 10.0 50.0% 0 1.96s 690 90 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 1.88s 660 95 521
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 7.7 10.0 66.7% 0 2.53s 663 533 0
GPT-5.4 Nano 4.1 7.2 22.2% 1 3.79s 642 594 1,408
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.11s 11,301 447 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 7.71s 5,445 234 382
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 3.0 10.0 0.0% 0 4.67s 204 431 0
GPT-5.4 Nano 3.0 10.0 0.0% 0 4.81s 195 70 1,174

Comparação rápida

Trocar par de comparação