AI BENCHY
Advertise here
#77

Grok 4.20

X AI Lanzamiento: 2026-03-31 Probado el: 2026-05-22 00:32 x-ai/grok-4.20::medium
(medium) (none)

Resumen

Grok 4.20 obtiene 6.7 en AI BENCHY y ocupa el puesto #77. Tiene fiabilidad 10.0, una tasa de aciertos de 61.7%, coste total de $0.832 y tiempo medio de respuesta de 19.09s.

Nota de identidad

Grok 4.20 Beta fue la versión preliminar de Grok 4.20.

Consistencia

8.0

Fiabilidad

10.0

Total de tokens de salida

158,105

Total de tokens de entrada

0

Precio de entrada

$1.250 / 1M

Precio de salida

$2.500 / 1M

Pruebas correctas

Pruebas incorrectas: 10

Tasa de aciertos por intento: 61.7%

Pruebas inestables

5

Pruebas inestables tuvieron resultados mixtos entre ejecuciones (al menos un acierto y un fallo).

Tiempo de respuesta (promedio)

19.09s

Tiempo de respuesta (máximo): 105.80s

Tiempo de respuesta (total): 381.86s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#77 xAI: Grok 4.20

medium
Coste
$0.041
Tiempo
110.3s
Tokens
16,336 tok

Historial de ejecuciones

Probado el Puntuación Fiabilidad Pruebas correctas Costo total Comparar
2026-06-04 14:17 Prueba nueva añadida 7.1 10.0 $0.609 Comparar
2026-05-22 00:32 Suite modificada 6.7 10.0 $0.832 Ejecución actual
2026-05-08 15:32 Suite modificada 6.9 10.0 $0.756 Comparar
2026-04-11 01:44 Primera ejecución registrada 7.0 N/D $0.743 Comparar

Esta ejecución usó una suite de benchmark diferente. Ten en cuenta los cambios de suite al interpretar la evolución histórica.

Comparación de ejecuciones

EjecuciónPuntuaciónConsistenciaFiabilidadPruebas correctasPruebas inestablesTotal de tokens de salidaTotal de tokens de entradaCosto totalTiempo de respuesta (promedio)
2026-05-22 00:32 · Suite modificada6.78.010.010/205158,1050$0.83219.09s
2026-06-04 14:17 · Prueba nueva añadida7.18.810.012/213221,34344,433$0.60927.68s
Diferencia-0.4-0.80.0-2+2-63238-44433+$0.223-8586ms

Estas dos ejecuciones usaron suites de benchmark distintas, así que las diferencias reflejan tanto cambios del modelo como de la suite.

Gráficos

Elige el primer modelo y luego haz clic en un segundo modelo para abrir una página lado a lado.

Total de tokens de salida

Puntuación vs Total de tokens de salida

Comparación rápida

Desglose por categoría

Categoría Puntuación Consistencia Pruebas correctas
Trucos anti-IA 8.2 7.9
Programación 4.1 1.8
Combinado 10.0 10.0
Análisis y extracción de datos 10.0 10.0
Específico del dominio 5.3 10.0
Inteligencia general 3.9 2.6
Seguimiento de instrucciones 7.3 6.0
Resolución de acertijos 7.7 10.0
Llamada de herramientas 3.0 10.0
Cultura general 3.0 10.0

Modelos comparados