Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3.5 Flash vs StepFun: Step 3.7 Flash

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-05-29

Métrica Gemini 3.5 Flash Gemini 3.5 Flash high Lançamento: 2026-05-19 Step 3.7 Flash Step 3.7 Flash high Lançamento: 2026-05-29
Pontuação 9.6 7.1
Posição #2 #74
Confiabilidade 10.0 10.0
Consistência 9.6 8.2
Testes corretos
Taxa de acerto por tentativa 96.7% 65.8%
Testes instáveis 1 4
Execuções totais 60 60
Custo por resultado 5.231 8.723
Custo total $0.994 $0.960
Preço de entrada $1.500 / 1M $0.200 / 1M
Preço de saída $9.000 / 1M $1.150 / 1M
Tokens de saída 1,969 828,084
Tokens de raciocínio 102,679 0
Tempo de resposta (médio) 8.30s 49.43s
Tempo de resposta (máx.) 34.82s 192.75s
Tempo de resposta (total) 165.92s 988.58s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.57s 174 4,997
Step 3.7 Flash 10.0 10.0 100.0% 0 13.40s 42,656 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 24.62s 450 34,170
Step 3.7 Flash 3.6 4.6 25.0% 1 126.82s 164,069 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.37s 351 16,323
Step 3.7 Flash 10.0 10.0 100.0% 0 13.01s 8,802 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.43s 279 8,466
Step 3.7 Flash 10.0 10.0 100.0% 0 14.72s 23,113 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 7.6 7.2 77.8% 1 14.09s 12 24,721
Step 3.7 Flash 4.1 4.4 44.5% 2 149.64s 410,502 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.63s 115 1,650
Step 3.7 Flash 5.5 10.0 0.0% 0 4.17s 2,862 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.35s 70 3,799
Step 3.7 Flash 9.8 10.0 100.0% 0 1.52s 2,010 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.23s 241 4,940
Step 3.7 Flash 5.3 7.2 44.4% 1 10.22s 25,422 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 9.8 10.0 100.0% 0 4.96s 265 1,608
Step 3.7 Flash 10.0 10.0 100.0% 0 2.79s 1,172 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.94s 12 2,005
Step 3.7 Flash 3.0 10.0 0.0% 0 149.34s 147,476 0

Comparação rápida

Trocar par de comparação