Navegação
AI BENCHY
Comparar Gráficos
❤️ Made by XCS
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs StepFun: Step 3.5 Flash

Nome do modelo:

Benchmarks gerados a partir das suítes de teste do AI BENCHY em : 2026-02-27 15:16

Resumo

Métrica Anthropic: Claude Sonnet 4.6 medium Lançamento: Data de lançamento desconhecida StepFun: Step 3.5 Flash medium Lançamento: Data de lançamento desconhecida Disponível grátis
Posição #8 #11
Pontuação 7.43 7.00
Consistência 9.40 8.32
Custo por resultado 8.105 0.000
Custo total $0.811 $0.000
Testes corretos
Testes errados 4 5
Taxa de acerto por tentativa 73.8% 73.8%
Testes instáveis 1 3
Tokens de saída 29,098 60,502
Tokens de raciocínio 20,435 117,044

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 7.00 10.00 66.7% 0 1,031 1,093
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 13,924 17,208
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 727 907
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 535 11,548
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 1.00 7.21 11.1% 1 25,790 16,919
StepFun: Step 3.5 Flash 4.00 7.21 44.4% 1 40,942 74,237
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 316 523
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 2,121 3,274
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 579 642
StepFun: Step 3.5 Flash 2.00 4.96 33.3% 2 2,705 6,975
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tokens de saída Tokens de raciocínio
Anthropic: Claude Sonnet 4.6 10.00 10.00 100.0% 0 655 351
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 275 3,802

Trocar par de comparação

Comparar Anthropic: Claude Sonnet 4.6 com...

Comparar StepFun: Step 3.5 Flash com...