AI BENCHY
Advertise here
#52

Grok 4.20

X AI Lanzamiento: 2026-03-31 Probado el: 2026-04-11 01:44 x-ai/grok-4.20::medium
~1T en total (~100B activos)MoECódigo cerradoEstimado
(medium) (none)

Resumen

Grok 4.20 obtiene 7.0 en AI BENCHY y ocupa el puesto #52. Tiene fiabilidad N/D, una tasa de aciertos de 66.7%, coste total de $0.743 y tiempo medio de respuesta de 10.33s.

Qué hace único a Grok 4.20: Destaca más en Combinado, donde ocupa #1, mientras que Programación es su área más débil con #18. Es notablemente rápido frente a modelos similares.

Nota de identidad

Grok 4.20 Beta fue la versión preliminar de Grok 4.20.

Datos del modelo

Investigado el 2026-08-12

Estimado
Parámetros
~1T en total (~100B activos)
Arquitectura
MoE
Disponibilidad
Código cerrado
Licencia
-

Mejor estimación basada en información pública; el proveedor no ha revelado todos los valores.

Consistencia

7.8

Fiabilidad

N/D

Total de tokens de salida

111,626

Total de tokens de entrada

0

Precio de entrada

$2.000 / 1M

Precio de salida

$6.000 / 1M

Pruebas correctas

Pruebas incorrectas: 9

Tasa de aciertos por intento: 66.7%

Pruebas inestables

5

Pruebas inestables tuvieron resultados mixtos entre ejecuciones (al menos un acierto y un fallo).

Tiempo de respuesta (promedio)

10.33s

Tiempo de respuesta (máximo): 29.87s

Tiempo de respuesta (total): 185.87s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 xAI: Grok 4.20

medium
Coste
$0.041
Tiempo
110.3s
Tokens
16,336 tok

Historial de ejecuciones

Probado el Puntuación Fiabilidad Pruebas correctas Costo total Comparar
2026-08-14 02:57 Nueva prueba 7.0 10.0 $0.805 Comparar
2026-07-16 23:07 Prueba nueva añadida 7.1 10.0 $0.777 Comparar
2026-06-04 14:17 Prueba nueva añadida 7.1 10.0 $0.609 Comparar
2026-05-22 00:32 Suite modificada 6.7 10.0 $0.832 Comparar
2026-05-08 15:32 Suite modificada 6.9 10.0 $0.756 Comparar
2026-04-11 01:44 Primera ejecución registrada 7.0 N/D $0.743 Ejecución actual

Comparación de ejecuciones

EjecuciónCobertura del benchmarkPuntuaciónConsistenciaFiabilidadPruebas correctasPruebas inestablesTotal de tokens de salidaTotal de tokens de entradaCosto totalTiempo de respuesta (promedio)
2026-04-11 01:44 · Primera ejecución registrada54/54 intentos7.07.8N/D9/185111,6260$0.74310.33s
2026-08-14 02:57 · Nueva prueba66/66 intentos7.08.210.011/225270,259102,986$0.80532.56s
Diferencia0.0-0.4-20-158633-102986-$0.062-22236ms

La cobertura del benchmark difiere: 54/54 intentos (Objetivo: 3 repeticiones por prueba) frente a 66/66 intentos (Objetivo: 3 repeticiones por prueba). Los totales y las métricas sensibles a las repeticiones no son directamente comparables.

Estas dos ejecuciones usaron suites de benchmark distintas, así que las diferencias reflejan tanto cambios del modelo como de la suite.

Gráficos

Elige el primer modelo y luego haz clic en un segundo modelo para abrir una página lado a lado.

Total de tokens de salida

Puntuación vs Total de tokens de salida

Comparación rápida

Desglose por categoría

Categoría Puntuación Consistencia Pruebas correctas
Trucos anti-IA 8.2 7.9
Programación 4.3 1.1
Combinado 10.0 10.0
Análisis y extracción de datos 10.0 10.0
Específico del dominio 5.3 10.0
Inteligencia general 5.8 2.8
Seguimiento de instrucciones 7.3 5.9
Resolución de acertijos 6.4 7.7
Llamada de herramientas 3.0 10.0

Modelos comparados