AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#46

Grok Build 0.1

X AI Lançamento: 2026-05-21 Testado em: 2026-05-22 00:36 x-ai/grok-build-0.1::medium
(medium) (none)

Resumo

Grok Build 0.1 marca 7.6 no AI BENCHY e fica em #46. Tem fiabilidade 10.0, taxa de acerto de 70.0%, custo total de $0.633 e tempo médio de resposta de 26.36s.

O que torna Grok Build 0.1 único: Destaca-se mais em Específico do domínio, onde fica em #3, enquanto Programação é a área mais fraca em #16. Usa uma quantidade invulgarmente alta de tokens de raciocínio, o que pode explicar execuções mais lentas ou caras.

Consistência

8.5

Total de tokens de saída

295,603

Total de tokens de entrada

0

Preço de entrada

$1.000 / 1M

Preço de saída

$2.000 / 1M

Testes corretos

Testes errados: 8

Taxa de acerto por tentativa: 70.0%

Testes instáveis

4

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

26.36s

Tempo de resposta (máx.): 103.89s

Tempo de resposta (total): 527.19s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 xAI: Grok Build 0.1

medium
Custo
$0.028
Tempo
81.3s
Tokens
14,009 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-06-04 14:22 Novo teste adicionado 7.4 10.0 $0.927 Comparar
2026-05-26 13:30 Novo teste 7.7 10.0 $0.729 Comparar
2026-05-22 00:36 Suite alterada 7.6 10.0 $0.633 Execução atual

Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.

Comparação de execuções

ExecuçãoPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-05-22 00:36 · Suite alterada7.68.510.012/204295,6030$0.63326.36s
2026-06-04 14:22 · Novo teste adicionado7.49.910.013/210440,80044,418$0.92749.90s
Diferença+0.2-1.40.0-1+4-145197-44418-$0.294-23542ms

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 5.3 2.9
Combinado 10.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 5.3 10.0
Inteligência geral 3.8 2.5
Seguimento de instruções 9.8 10.0
Resolução de quebra-cabeças 6.2 7.5
Chamada de ferramentas 10.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados