#20 GPT-5.4
medium- Custo
- $0.214
- Tempo
- 199.6s
- Tokens
- 14,349 tok
AI BENCHY Compare
OpenAI: GPT-5.4 vs StepFun: Step 3.7 Flash
Resumo
A pontuação média está praticamente empatada em 8.5 vs 8.5. Step 3.7 Flash (medium) tem menor custo de benchmark com $0.376 vs $1.210. Step 3.7 Flash (medium) é mais rápido com 20.35s vs 22.35s, com taxas de acerto de 76.2% vs 73.0%.
Modelo recomendadoStep 3.7 Flash (medium)Tem a melhor pontuação aqui (8.5) e custa cerca de 3.2x menos que GPT-5.4 (medium).
Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-07-14
| Métrica | GPT-5.4 GPT-5.4 medium | Step 3.7 Flash Step 3.7 Flash medium |
|---|---|---|
| Pontuação | 8.5 | 8.5 |
| Posição | #20 | #23 |
| Confiabilidade | 10.0 | 9.9 |
| Consistência | 8.6 | 9.3 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 76.2% | 73.0% |
| Testes instáveis | 4 | 2 |
| Execuções totais | 63 | 61 |
| Custo por resultado | 8.640 | 2.686 |
| Custo total | $1.210 | $0.376 |
| Preço de entrada | $2.500 / 1M | $0.200 / 1M |
| Preço de saída | $15.000 / 1M | $1.150 / 1M |
| Total de tokens de entrada | 34,108 | 39,981 |
| Tokens de saída | 2,242 | 319,958 |
| Tokens de raciocínio | 72,707 | 0 |
| Tempo de resposta (médio) | 22.35s | 20.35s |
| Tempo de resposta (máx.) | 100.41s | 113.98s |
| Tempo de resposta (total) | 469.29s | 427.42s |
Geração showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#23 Step 3.7 Flash
medium- Custo
- $0.006
- Tempo
- 46.2s
- Tokens
- 4,466 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| GPT-5.4 | 8.8 | 7.8 | 88.9% | 1 | 44.36s | 7,305 | 433 | 24,216 | |
| Step 3.7 Flash | 8.8 | 7.8 | 88.9% | 1 | 27.42s | 7,437 | 44,797 | 0 |
Comparação rápida
Trocar par de comparação
GPT-5.2 ChatnonevsStep 3.7 FlashmediumDeepSeek V4 FlashhighvsStep 3.7 FlashmediumDeepSeek V4 FlashhighvsGPT-5.4mediumGPT-5.6 TerrahighvsStep 3.7 FlashmediumStep 3.7 FlashmediumvsGLM 5.2highGPT-5.4mediumvsGLM 5.2highKAT-Coder-Pro V2.5lowvsStep 3.7 FlashmediumKAT-Coder-Pro V2.5lowvsGPT-5.4mediumStep 3.7 FlashmediumvsGrok 4.5lowGPT-5.4mediumvsGrok 4.5lowGemini 3.5 FlashlowvsGPT-5.4mediumClaude Opus 4.8lowvsStep 3.7 Flashmedium