AI BENCHY
Advertise here
#46

Grok Build 0.1

X AI Lançamento: 2026-05-21 Testado em: 2026-05-22 00:36 x-ai/grok-build-0.1::medium
(medium) (none)

Resumo

Grok Build 0.1 marca 7.6 no AI BENCHY e fica em #46. Tem fiabilidade 10.0, taxa de acerto de 70.0%, custo total de $0.633 e tempo médio de resposta de 26.36s.

O que torna Grok Build 0.1 único: Destaca-se mais em Específico do domínio, onde fica em #3, enquanto Programação é a área mais fraca em #16. Usa uma quantidade invulgarmente alta de tokens de raciocínio, o que pode explicar execuções mais lentas ou caras.

Consistência

8.5

Total de tokens de saída

295,603

Total de tokens de entrada

0

Preço de entrada

$1.000 / 1M

Preço de saída

$2.000 / 1M

Testes corretos

Testes errados: 8

Taxa de acerto por tentativa: 70.0%

Testes instáveis

4

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

26.36s

Tempo de resposta (máx.): 103.89s

Tempo de resposta (total): 527.19s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 xAI: Grok Build 0.1

medium
Custo
$0.028
Tempo
81.3s
Tokens
14,009 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-06-04 14:22 Novo teste adicionado 7.4 10.0 $0.927 Comparar
2026-05-26 13:30 Novo teste 7.7 10.0 $0.729 Comparar
2026-05-22 00:36 Suite alterada 7.6 10.0 $0.633 Execução atual

Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 5.3 2.9
Combinado 10.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 5.3 10.0
Inteligência geral 3.8 2.5
Seguimento de instruções 9.8 10.0
Resolução de quebra-cabeças 6.2 7.5
Chamada de ferramentas 10.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados