Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs StepFun: Step 3.5 Flash

Resumo

Comparação benchmark Nemotron 3 Ultra 550b A55b vs Step 3.5 Flash: Nemotron 3 Ultra 550b A55b lidera na pontuação média com 8.1 vs 2.6. Step 3.5 Flash tem menor custo de benchmark com $0.020 vs $0.158. Nemotron 3 Ultra 550b A55b é mais rápido com 15.05s vs 39.03s, com taxas de acerto de 69.8% vs 28.6%.

Modelo recomendado: Nemotron 3 Ultra 550b A55b - Tem a melhor pontuação aqui (8.1) e responde cerca de 2.6x mais rápido que Step 3.5 Flash.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-18

Métrica Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lançamento: 2026-06-04 Disponível grátis Step 3.5 Flash Step 3.5 Flash none Lançamento: 2026-02-01
Pontuação 8.1 2.6
Posição #26 #168
Confiabilidade 9.7 10.0
Consistência 8.8 5.7
Testes corretos
Taxa de acerto por tentativa 69.8% 28.6%
Testes instáveis 3 0
Execuções totais 63 36
Custo por resultado 0.000 0.328
Custo total $0.158 $0.020
Preço de entrada $0.500 / 1M $0.090 / 1M
Preço de saída $2.200 / 1M $0.300 / 1M
Total de tokens de entrada 46,813 1,971
Tokens de saída 18,002 64,795
Tokens de raciocínio 53,091 0
Tempo de resposta (médio) 15.05s 39.03s
Tempo de resposta (máx.) 43.93s 114.12s
Tempo de resposta (total) 316.09s 312.26s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Nemotron 3 Ultra 550b A55b

medium
SVG inválido
Custo
$0.000
Tempo
300.0s
Tokens
0 tok

#168 Step 3.5 Flash

none
Custo
$0.005
Tempo
156.3s
Tokens
13,887 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Step 3.5 Flash 10.0 10.0 100.0% 0 34.99s 691 21,766 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Step 3.5 Flash 9.8 3.3 0.0% 0 0ms 0 0 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Step 3.5 Flash 1.5 5.0 0.0% 0 0ms 0 0 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Step 3.5 Flash 3.3 3.3 33.3% 0 34.54s 165 7,389 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Step 3.5 Flash 4.0 10.0 0.0% 0 14.37s 509 2,451 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Step 3.5 Flash 5.0 5.0 50.0% 0 9.30s 384 1,427 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Step 3.5 Flash 0.0 0.0 0.0% 0 0ms 0 0 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Step 3.5 Flash 3.0 10.0 0.0% 0 114.12s 222 31,762 0

Comparação rápida

Trocar par de comparação