Navegação
AI BENCHY
Comparar Gráficos Metodologia
❤️ Made by XCS
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3 Flash Preview vs StepFun: Step 3.5 Flash

Comparar:

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-03-06

Métrica Google: Gemini 3 Flash Preview none Lançamento: 2025-12-17 StepFun: Step 3.5 Flash medium Lançamento: 2026-02-01 Disponível grátis
Posição #20 #13
Pontuação média 7.2 7.4
Consistência 9.0 9.1
Custo por resultado 0.169 0.000
Custo total $0.019 $0.000
Testes corretos
Taxa de acerto por tentativa 75.0% 68.8%
Testes instáveis 2 2
Execuções totais 48 (16 x 3) 48 (16 x 3)
Tokens de saída 1,411 71,452
Tokens de raciocínio 0 155,147
Tempo de resposta (médio) 1.75s 29.10s
Tempo de resposta (máx.) 3.56s 170.45s
Tempo de resposta (total) 15.71s 290.96s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação média vs Tempo de resposta (médio)

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 7.0 10.0 66.7% 0 1.59s 208 0
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 18.54s 13,924 17,208
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 10.0 1.6 66.7% 1 3.56s 350 0
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 9.9 10.0 100.0% 0 1.41s 279 0
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 7.0 10.0 66.7% 0 963ms 18 0
StepFun: Step 3.5 Flash 4.0 7.2 44.4% 1 170.45s 45,350 90,436
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 10.0 10.0 100.0% 0 1.13s 104 0
StepFun: Step 3.5 Flash 6.0 10.0 0.0% 0 6.54s 2,214 2,584
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 5.5 5.8 66.7% 1 1.58s 74 0
StepFun: Step 3.5 Flash 9.0 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 7.0 10.0 66.7% 0 1.06s 144 0
StepFun: Step 3.5 Flash 4.0 10.0 33.3% 0 7.72s 5,629 10,835
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Google: Gemini 3 Flash Preview 10.0 10.0 100.0% 0 3.35s 234 0
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Comparação rápida

Trocar par de comparação