Navegação
AI BENCHY
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 Nano vs StepFun: Step 3.5 Flash

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-03-17

Métrica GPT-5.4 Nano GPT-5.4 Nano medium Lançamento: 2026-03-17 Step 3.5 Flash Step 3.5 Flash medium Lançamento: 2026-02-01 Disponível grátis
Posição #28 #22
Pontuação 7.4 7.9
Consistência 9.0 9.1
Custo por resultado 0.769 0.000
Custo total $0.077 $0.000
Testes corretos
Taxa de acerto por tentativa 66.7% 70.6%
Testes instáveis 2 2
Execuções totais 51 49
Tokens de saída 2,474 71,904
Tokens de raciocínio 54,516 155,607
Tempo de resposta (médio) 11.08s 26.78s
Tempo de resposta (máx.) 94.06s 170.45s
Tempo de resposta (total) 188.39s 294.58s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 8.3 10.0 75.0% 0 4.52s 683 2,254
Step 3.5 Flash 10.0 10.0 100.0% 0 13.56s 14,376 17,668
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 9.8 10.0 100.0% 0 24.13s 349 5,719
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 10.0 10.0 100.0% 0 2.54s 234 516
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 5.9 7.2 55.6% 1 38.18s 60 43,325
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 45,350 90,436
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 4.5 10.0 0.0% 0 4.15s 179 443
Step 3.5 Flash 5.5 10.0 0.0% 0 6.54s 2,214 2,584
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 9.8 10.0 100.0% 0 1.88s 95 521
Step 3.5 Flash 8.5 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 4.0 7.1 22.2% 1 3.65s 640 1,356
Step 3.5 Flash 5.3 10.0 33.3% 0 7.72s 5,629 10,835
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 10.0 10.0 100.0% 0 7.71s 234 382
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Comparação rápida

Trocar par de comparação

Gemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumDisponível grátisGPT-5.2 ChatnonevsStep 3.5 FlashmediumDisponível grátisGemini 3 Flash PreviewnonevsStep 3.5 FlashmediumDisponível grátisGemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumDisponível grátisClaude Sonnet 4.6nonevsGPT-5.4 NanomediumGPT-5.3 ChatnonevsStep 3.5 FlashmediumDisponível grátisGemini 3.1 Flash Lite PreviewnonevsGPT-5.4 NanomediumGemini 3 Flash PreviewnonevsGPT-5.4 NanomediumGemini 3.1 Flash Lite PreviewlowvsGPT-5.4 NanomediumClaude Sonnet 4.6nonevsStep 3.5 FlashmediumDisponível grátisGPT-5.4 NanomediumvsQwen3.5 Plus 2026-02-15noneGPT-5.4 NanomediumvsGLM 5none