Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta

Resumo

Comparação benchmark Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta: Nemotron 3 Ultra 550b A55b lidera na pontuação média com 7.5 vs 5.8. Grok 4.20 Beta tem menor custo de benchmark com $0.087 vs $0.177. Grok 4.20 Beta é mais rápido com 1.19s vs 15.05s, com taxas de acerto de 69.8% vs 37.0%.

Modelo recomendado: Grok 4.20 Beta - Oferece o melhor compromisso geral: pontuação competitiva (5.8), custo menor que Nemotron 3 Ultra 550b A55b e tempo de resposta equilibrado.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-10

Métrica Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lançamento: 2026-06-04 Disponível grátis Grok 4.20 Beta Grok 4.20 Beta none Lançamento: 2026-03-12
Pontuação 7.5 5.8
Posição #42 #107
Confiabilidade 9.7 N/D
Consistência 8.8 9.6
Testes corretos
Taxa de acerto por tentativa 69.8% 37.0%
Testes instáveis 3 1
Execuções totais 63 52
Custo por resultado 0.000 1.510
Custo total $0.177 $0.087
Preço de entrada $0.500 / 1M $2.041 / 1M
Preço de saída $2.500 / 1M $2.041 / 1M
Total de tokens de entrada 46,813 40,597
Tokens de saída 18,002 1,657
Tokens de raciocínio 53,091 0
Tempo de resposta (médio) 15.05s 1.19s
Tempo de resposta (máx.) 43.93s 6.48s
Tempo de resposta (total) 316.09s 21.43s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#42 Nemotron 3 Ultra 550b A55b

medium
No showcase result has been generated for this model yet.
Cost
$0.000
Time
-
Tokens
0 tok

#107 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Grok 4.20 Beta 4.0 8.4 16.7% 1 597ms 1,986 251 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Grok 4.20 Beta 5.5 10.0 0.0% 0 1.14s 358 74 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Grok 4.20 Beta 3.0 10.0 0.0% 0 6.48s 17,673 282 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Grok 4.20 Beta 10.0 10.0 100.0% 0 601ms 7,749 197 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Grok 4.20 Beta 3.0 10.0 0.0% 0 611ms 1,746 160 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Grok 4.20 Beta 5.0 10.0 0.0% 0 541ms 819 87 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Grok 4.20 Beta 6.3 10.0 50.0% 0 649ms 1,350 60 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Grok 4.20 Beta 7.7 10.0 66.7% 0 586ms 1,671 357 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Grok 4.20 Beta 10.0 10.0 100.0% 0 4.79s 7,245 189 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Grok 4.20 Beta - - - - - - - - -

Comparação rápida

Trocar par de comparação