AI BENCHY
Advertise here
#107

Grok 4.20 Beta

X AI Lanzamiento: 2026-03-12 Probado el: 2026-05-06 14:15 x-ai/grok-4.20-beta::none
(medium) (none)

Resumen

Grok 4.20 Beta obtiene 5.8 en AI BENCHY y ocupa el puesto #107. Tiene fiabilidad N/D, una tasa de aciertos de 37.0%, coste total de $0.087 y tiempo medio de respuesta de 1.19s.

Qué hace único a Grok 4.20 Beta: Destaca más en Resolución de acertijos, donde ocupa #1, mientras que Seguimiento de instrucciones es su área más débil con #10. Es notablemente rápido frente a modelos similares.

Modelo archivado: este modelo ya no se actualiza ni se prueba en pruebas nuevas.

Nota de identidad

Grok 4.20 Beta fue la versión preliminar de xAI: Grok 4.20.

Consistencia

9.6

Fiabilidad

N/D

Costo total (precio actual)

$0.087 ↓ -4.8%

Probado a: $0.091

Total de tokens de salida

1,657

Total de tokens de entrada

40,597

Precio de entrada

$2.041 / 1M

Precio de salida

$2.041 / 1M

Pruebas correctas

Pruebas incorrectas: 12

Tasa de aciertos por intento: 37.0%

Pruebas inestables

1

Pruebas inestables tuvieron resultados mixtos entre ejecuciones (al menos un acierto y un fallo).

Tiempo de respuesta (promedio)

1.19s

Tiempo de respuesta (máximo): 6.48s

Tiempo de respuesta (total): 21.43s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Historial de ejecuciones

Probado el Puntuación Fiabilidad Pruebas correctas Costo total Comparar
2026-05-06 14:15 Nueva prueba 5.8 N/D $0.087 Ejecución actual
2026-05-06 14:15 Nueva prueba 5.5 N/D $0.091 Comparar
2026-05-06 14:15 Nueva prueba 5.5 N/D $0.091 Comparar
2026-05-06 14:15 Suite modificada 5.5 N/D $0.091 Comparar
2026-04-11 01:19 Primera ejecución registrada 5.3 N/D $0.091 Comparar

Comparación de ejecuciones

EjecuciónPuntuaciónConsistenciaFiabilidadPruebas correctasPruebas inestablesTotal de tokens de salidaTotal de tokens de entradaCosto totalTiempo de respuesta (promedio)
2026-05-06 14:15 · Ejecución actual5.89.6N/D6/1811,65740,597$0.0871.19s
2026-04-11 01:19 · Primera ejecución registrada5.39.2N/D4/1821,5910$0.0911.19s
Diferencia+0.5+0.4+2-1+66+40597-$0.004+3ms

Estas dos ejecuciones usaron suites de benchmark distintas, así que las diferencias reflejan tanto cambios del modelo como de la suite.

Historial de precios

Datos históricos de precios de este modelo de OpenRouter.

Fecha Precio de entrada Precio de salida
2026-06-04 15:40 $2.041 / 1M $2.041 / 1M

Gráficos

Elige el primer modelo y luego haz clic en un segundo modelo para abrir una página lado a lado.

Total de tokens de salida

Puntuación vs Total de tokens de salida

Comparación rápida

Desglose por categoría

Categoría Puntuación Consistencia Pruebas correctas
Trucos anti-IA 4.0 8.4
Programación 5.5 10.0
Combinado 3.0 10.0
Análisis y extracción de datos 10.0 10.0
Específico del dominio 3.0 10.0
Inteligencia general 5.0 10.0
Seguimiento de instrucciones 6.3 10.0
Resolución de acertijos 7.7 10.0
Llamada de herramientas 10.0 10.0

Modelos comparados