AI BENCHY
Advertise here
#89

Grok 4.20

X AI Lançamento: 2026-03-31 Testado em: 2026-04-11 01:44 x-ai/grok-4.20::none
(medium) (none)

Resumo

Grok 4.20 marca 5.2 no AI BENCHY e fica em #89. Tem fiabilidade N/D, taxa de acerto de 29.6%, custo total de $0.095 e tempo médio de resposta de 1.11s.

O que torna Grok 4.20 único: É notavelmente rápido em comparação com modelos semelhantes.

Nota de identidade

Grok 4.20 Beta foi a versão de prévia de Grok 4.20.

Pontuação

5.2

Consistência

9.5

Confiabilidade

N/D

Custo total (preço atual)

$0.095

Total de tokens de saída

1,967

Total de tokens de entrada

0

Preço de entrada

$2.000 / 1M

Preço de saída

$6.000 / 1M

Testes corretos

Testes errados: 13

Taxa de acerto por tentativa: 29.6%

Testes instáveis

1

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

1.11s

Tempo de resposta (máx.): 6.04s

Tempo de resposta (total): 20.02s

Resposta incorreta: 9 Não seguiu as instruções: 2 Formatação extra: 1 Chamada de ferramenta inválida: 1

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 xAI: Grok 4.20

none
Custo
$0.004
Tempo
6.5s
Tokens
1,367 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-05-06 14:16 Novo teste 5.4 N/D $0.057 ↓ Comparar
2026-05-06 14:16 Novo teste 5.4 N/D $0.095 Comparar
2026-05-06 14:16 Novo teste 5.4 N/D $0.095 Comparar
2026-05-06 14:16 Suite alterada 5.4 N/D $0.095 Comparar
2026-04-11 01:44 Primeira execução registrada 5.2 N/D $0.095 Execução atual

Comparação de execuções

ExecuçãoPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-11 01:44 · Primeira execução registrada5.29.5N/D5/1811,9670$0.0951.11s
2026-05-06 14:16 · Novo teste5.49.5N/D6/1811,9670$0.0951.11s
Diferença-0.20.0-1000$0.0000ms

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Grok 4.20nonevsQwen3.5-122B-A10BnoneGrok 4.20nonevsMiniMax M2.7mediumGrok 4.20nonevsGPT-5.4 MininoneGrok 4.20nonevsQwen3.6 35B A3BnoneGrok 4.20nonevsLaguna XS 2.1noneDisponível grátisGrok 4.20nonevsMistral Small 4noneGrok 4.20nonevsGemini 3.5 FlashhighGrok 4.20nonevsGemini 3 Flash PreviewmediumGrok 4.20nonevsNemotron 3 Ultra 550b A55bmediumDisponível grátisGrok 4.20nonevsGPT-5.5low

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 4.8 10.0
Programação 3.4 9.3
Combinado 3.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 3.0 10.0
Inteligência geral 4.8 10.0
Seguimento de instruções 4.8 10.0
Resolução de quebra-cabeças 5.3 7.4
Chamada de ferramentas 10.0 10.0

Modelos comparados