Navegação
AI BENCHY
Your ad here

AI BENCHY Compare

Nemotron 3 Super 120b A12b vs StepFun: Step 3.5 Flash

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-03-12

Métrica Nemotron 3 Super 120b A12b Nemotron 3 Super 120b A12b none Lançamento: 2026-03-11 Disponível grátis Step 3.5 Flash Step 3.5 Flash medium Lançamento: 2026-02-01 Disponível grátis
Posição #59 #14
Pontuação média 3.4 7.4
Consistência 8.6 9.1
Custo por resultado 0.000 0.000
Custo total $0.000 $0.000
Testes corretos
Taxa de acerto por tentativa 31.3% 68.8%
Testes instáveis 3 2
Execuções totais 48 48
Tokens de saída 4,222 71,452
Tokens de raciocínio 0 155,147
Tempo de resposta (médio) 8.90s 29.10s
Tempo de resposta (máx.) 24.97s 170.45s
Tempo de resposta (total) 142.40s 290.96s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação média vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação média vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 10.0 10.0 0.0% 0 7.14s 2,171 0
Step 3.5 Flash 10.0 10.0 100.0% 0 18.54s 13,924 17,208
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 10.0 10.0 0.0% 0 19.98s 124 0
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 9.9 10.0 100.0% 0 7.92s 249 0
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 10.0 7.2 22.2% 1 6.23s 26 0
Step 3.5 Flash 4.0 7.2 44.4% 1 170.45s 45,350 90,436
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 3.0 9.9 0.0% 0 24.97s 170 0
Step 3.5 Flash 6.0 10.0 0.0% 0 6.54s 2,214 2,584
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 4.5 6.9 33.3% 1 1.50s 66 0
Step 3.5 Flash 9.0 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 4.7 10.0 33.3% 0 7.50s 1,135 0
Step 3.5 Flash 4.0 10.0 33.3% 0 7.72s 5,629 10,835
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Nemotron 3 Super 120b A12b 10.0 1.6 66.7% 1 16.00s 281 0
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Comparação rápida

Trocar par de comparação