AI BENCHY
Advertise here

#102

Nemotron 3 Super

NVIDIA Lançamento: 2026-03-11 Testado em: 2026-05-22 00:27 nvidia/nemotron-3-super-120b-a12b::medium
(medium) (none)

Consistência

9.2

Total de tokens de saída

44,683

Preço de entrada

$0.090 / 1M

Preço de saída

$0.450 / 1M

Testes corretos

Testes errados: 12

Taxa de acerto por tentativa: 43.3%

Testes instáveis

2

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

20.87s

Tempo de resposta (máx.): 87.80s

Tempo de resposta (total): 375.66s

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-05-22 00:27 Suite alterada 5.9 10.0 $0.001 Execução atual
2026-05-08 15:31 Suite alterada 6.1 10.0 $0.001 Comparar
2026-04-20 17:48 Primeira execução registrada 6.7 N/D $0.000 Comparar

Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.

Comparação de execuções

ExecuçãoPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaCusto totalTempo de resposta (médio)
2026-05-22 00:27 · Execução atual5.99.210.08/20244,683$0.00120.87s
2026-04-20 17:48 · Primeira execução registrada6.78.7N/D9/18341,715$0.00019.06s
Diferença-0.8+0.5-1-1+2968+$0.001+1805ms

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 8.3 10.0
Programação 3.2 9.9
Combinado 10.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 2.9 4.4
Inteligência geral 4.1 10.0
Seguimento de instruções 7.3 10.0
Resolução de quebra-cabeças 3.0 10.0
Chamada de ferramentas 10.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados