AI BENCHY
Advertise here
#73

gpt-oss-120b

OpenAI Lançamento: 2025-08-05 Testado em: 2026-04-21 12:42 openai/gpt-oss-120b::medium
(medium) (none)

Resumo

gpt-oss-120b marca 5.8 no AI BENCHY e fica em #73. Tem fiabilidade N/D, taxa de acerto de 51.9%, custo total de $0.011 e tempo médio de resposta de 16.08s.

O que torna gpt-oss-120b único: O custo total do benchmark é invulgarmente baixo para este nível de pontuação.

Consistência

7.2

Confiabilidade

N/D

Total de tokens de saída

50,372

Total de tokens de entrada

0

Preço de entrada

$0.000 / 1M

Preço de saída

$0.000 / 1M

Testes corretos

Testes errados: 11

Taxa de acerto por tentativa: 51.9%

Testes instáveis

6

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

16.08s

Tempo de resposta (máx.): 50.92s

Tempo de resposta (total): 176.88s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#73 gpt-oss-120b

medium
Custo
$0.001
Tempo
26.7s
Tokens
555 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-06-04 13:44 Novo teste adicionado 6.1 10.0 $0.013 Comparar
2026-05-22 00:18 Suite alterada 5.6 10.0 $0.012 Comparar
2026-04-21 12:42 Primeira execução registrada 5.8 N/D $0.011 Execução atual

Comparação de execuções

ExecuçãoPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-21 12:42 · Primeira execução registrada5.87.2N/D7/18650,3720$0.01116.08s
2026-06-04 13:44 · Novo teste adicionado6.18.010.09/21570,24639,084$0.01322.28s
Diferença-0.3-0.8-2+1-19874-39084-$0.003-6203ms

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 6.7 9.9
Programação 4.3 1.1
Combinado 10.0 10.0
Análise e extração de dados 6.4 5.9
Específico do domínio 2.9 4.4
Inteligência geral 4.3 10.0
Seguimento de instruções 9.9 10.0
Resolução de quebra-cabeças 3.2 4.7
Chamada de ferramentas 9.8 10.0

Modelos comparados