Navegação
AI BENCHY
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs OpenAI: GPT-5.4 Mini

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-03-21

Métrica Claude Sonnet 4.6 Claude Sonnet 4.6 medium Lançamento: 2026-02-17 GPT-5.4 Mini GPT-5.4 Mini medium Lançamento: 2026-03-17
Pontuação 7.9 7.1
Posição #21 #36
Consistência 9.5 7.2
Testes corretos
Taxa de acerto por tentativa 72.6% 68.6%
Testes instáveis 1 6
Execuções totais 51 51
Custo por resultado 8.531 3.610
Custo total $1.024 $0.289
Preço de entrada $3.000 / 1M $0.750 / 1M
Preço de saída $15.000 / 1M $4.500 / 1M
Tokens de saída 35,174 1,708
Tokens de raciocínio 24,687 58,019
Tempo de resposta (médio) 10.09s 15.66s
Tempo de resposta (máx.) 46.35s 102.91s
Tempo de resposta (total) 90.85s 266.14s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 6.5 10.0 50.0% 0 2.98s 1,046 1,093
GPT-5.4 Mini 8.6 7.9 91.7% 1 4.05s 296 2,876
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 46.35s 5,871 3,962
GPT-5.4 Mini 10.0 10.0 100.0% 0 17.81s 317 4,317
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 13.90s 649 742
GPT-5.4 Mini 10.0 10.0 100.0% 0 2.43s 234 650
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 2.9 7.2 11.1% 1 0ms 25,790 16,919
GPT-5.4 Mini 4.1 4.4 44.5% 2 65.31s 60 43,286
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.94s 256 433
GPT-5.4 Mini 4.5 10.0 0.0% 0 3.72s 150 510
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 2.61s 318 552
GPT-5.4 Mini 7.4 6.5 66.7% 1 2.50s 129 1,337
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.80s 589 635
GPT-5.4 Mini 6.8 7.9 55.6% 1 4.33s 271 2,449
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Claude Sonnet 4.6 10.0 10.0 100.0% 0 7.48s 655 351
GPT-5.4 Mini 4.7 1.6 66.7% 1 9.62s 251 2,594

Comparação rápida

Trocar par de comparação