Navegação
AI BENCHY
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 Nano vs StepFun: Step 3.5 Flash

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-03-17

Métrica GPT-5.4 Nano GPT-5.4 Nano none Lançamento: 2026-03-17 Step 3.5 Flash Step 3.5 Flash medium Lançamento: 2026-02-01 Disponível grátis
Posição #73 #22
Pontuação 4.3 7.9
Consistência 7.3 9.1
Custo por resultado 0.404 0.000
Custo total $0.009 $0.000
Testes corretos
Taxa de acerto por tentativa 29.4% 70.6%
Testes instáveis 6 2
Execuções totais 51 49
Tokens de saída 2,185 71,904
Tokens de raciocínio 0 155,607
Tempo de resposta (médio) 1.39s 26.78s
Tempo de resposta (máx.) 3.84s 170.45s
Tempo de resposta (total) 23.70s 294.58s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 3.5 8.0 16.7% 1 1.18s 800 0
Step 3.5 Flash 10.0 10.0 100.0% 0 13.56s 14,376 17,668
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 3.0 10.0 0.0% 0 3.84s 280 0
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 6.5 10.0 50.0% 0 1.11s 219 0
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 2.9 4.4 22.2% 2 926ms 52 0
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 45,350 90,436
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 3.8 2.5 33.3% 1 1.31s 180 0
Step 3.5 Flash 5.5 10.0 0.0% 0 6.54s 2,214 2,584
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 5.0 6.8 33.3% 1 787ms 84 0
Step 3.5 Flash 8.5 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 3.7 7.3 22.2% 1 1.29s 348 0
Step 3.5 Flash 5.3 10.0 33.3% 0 7.72s 5,629 10,835
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5.4 Nano 10.0 10.0 100.0% 0 3.40s 222 0
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Comparação rápida

Trocar par de comparação

Gemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumDisponível grátisGPT-5.2 ChatnonevsStep 3.5 FlashmediumDisponível grátisGemini 3 Flash PreviewnonevsStep 3.5 FlashmediumDisponível grátisGemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumDisponível grátisGPT-5.4 NanononevsQwen3.5-9BmediumGPT-5.3 ChatnonevsStep 3.5 FlashmediumDisponível grátisGPT-5.4 NanononevsGLM 4.7 FlashmediumGPT-5.4 NanononevsQwen3 Coder NextmediumClaude Sonnet 4.6nonevsStep 3.5 FlashmediumDisponível grátisGemini 3 Flash PreviewlowvsStep 3.5 FlashmediumDisponível grátisQwen3.5 Plus 2026-02-15nonevsStep 3.5 FlashmediumDisponível grátisStep 3.5 FlashmediumDisponível grátisvsGLM 5none