Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5 Mini vs StepFun: Step 3.7 Flash

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-05-29

Métrica GPT-5 Mini GPT-5 Mini medium Lançamento: 2025-08-07 Step 3.7 Flash Step 3.7 Flash high Lançamento: 2026-05-29
Pontuação 7.2 7.1
Posição #73 #74
Confiabilidade 10.0 10.0
Consistência 9.1 8.2
Testes corretos
Taxa de acerto por tentativa 61.7% 65.8%
Testes instáveis 2 4
Execuções totais 60 60
Custo por resultado 1.348 8.723
Custo total $0.149 $0.960
Preço de entrada $0.250 / 1M $0.200 / 1M
Preço de saída $2.000 / 1M $1.150 / 1M
Tokens de saída 6,723 828,084
Tokens de raciocínio 63,082 0
Tempo de resposta (médio) 23.75s 49.43s
Tempo de resposta (máx.) 88.15s 192.75s
Tempo de resposta (total) 475.03s 988.58s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 7.1 7.6 66.7% 1 13.86s 1,715 6,378
Step 3.7 Flash 10.0 10.0 100.0% 0 13.40s 42,656 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 10.0 10.0 100.0% 0 30.74s 580 12,544
Step 3.7 Flash 3.6 4.6 25.0% 1 126.82s 164,069 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 10.0 10.0 100.0% 0 88.15s 754 11,520
Step 3.7 Flash 10.0 10.0 100.0% 0 13.01s 8,802 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 10.0 10.0 100.0% 0 12.58s 453 3,200
Step 3.7 Flash 10.0 10.0 100.0% 0 14.72s 23,113 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 3.6 7.2 22.2% 1 44.63s 293 14,016
Step 3.7 Flash 4.1 4.4 44.5% 2 149.64s 410,502 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 4.5 10.0 0.0% 0 13.50s 349 1,856
Step 3.7 Flash 5.5 10.0 0.0% 0 4.17s 2,862 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 10.0 10.0 100.0% 0 11.59s 310 3,968
Step 3.7 Flash 9.8 10.0 100.0% 0 1.52s 2,010 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 5.6 9.8 33.3% 0 15.20s 1,622 6,144
Step 3.7 Flash 5.3 7.2 44.4% 1 10.22s 25,422 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 10.0 10.0 100.0% 0 18.64s 487 1,600
Step 3.7 Flash 10.0 10.0 100.0% 0 2.79s 1,172 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
GPT-5 Mini 3.0 10.0 0.0% 0 9.99s 160 1,856
Step 3.7 Flash 3.0 10.0 0.0% 0 149.34s 147,476 0

Comparação rápida

Trocar par de comparação

GPT-5.4 NanomediumvsStep 3.7 FlashhighSeed-2.0-MinimediumvsStep 3.7 FlashhighQwen3.6 Max PreviewnonevsStep 3.7 FlashhighClaude Opus 4.6mediumvsStep 3.7 FlashhighRing-2.6-1TnonevsGPT-5 MinimediumGPT-5 MinimediumvsQwen3.6 Max PreviewnoneStep 3.7 FlashhighvsMiMo-V2-FlashmediumRing-2.6-1TnonevsStep 3.7 FlashhighRing-2.6-1TmediumvsStep 3.7 FlashhighClaude Opus 4.8nonevsGPT-5 MinimediumQwen3.5-35B-A3BmediumvsStep 3.7 FlashhighClaude Sonnet 4.6nonevsStep 3.7 Flashhigh