Navegação
AI BENCHY
Comparar Gráficos
❤️ Made by XCS
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs StepFun: Step 3.5 Flash

Nome do modelo:

Benchmarks gerados a partir das suítes de teste do AI BENCHY em : 2026-02-27 15:16

Resumo

Métrica Anthropic: Claude Sonnet 4.6 none Lançamento: Data de lançamento desconhecida StepFun: Step 3.5 Flash medium Lançamento: Data de lançamento desconhecida Disponível grátis
Posição #14 #11
Pontuação 6.36 7.00
Consistência 9.50 8.32
Custo por resultado 1.325 0.000
Custo total $0.106 $0.000
Testes corretos
Testes errados 6 5
Taxa de acerto por tentativa 59.5% 73.8%
Testes instáveis 1 3
Tokens de saída 2,637 60,502
Tokens de raciocínio 0 117,044

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 4.00 10.00 33.3% 0 1,199 0
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 13,924 17,208
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 252 0
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 535 11,548
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 7.00 10.00 66.7% 0 54 0
StepFun: Step 3.5 Flash 4.00 7.21 44.4% 1 40,942 74,237
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 5.50 10.00 50.0% 0 90 0
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 2,121 3,274
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 5.00 7.68 44.4% 1 595 0
StepFun: Step 3.5 Flash 2.00 4.96 33.3% 2 2,705 6,975
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 447 0
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 275 3,802

Trocar par de comparação

Comparar Anthropic: Claude Sonnet 4.6 com...

Comparar StepFun: Step 3.5 Flash com...