AI BENCHY
Advertise here
#116

Grok 4.20 Beta

X AI Sortie: 2026-03-12 Testé le: 2026-05-06 14:15 x-ai/grok-4.20-beta::none
(medium) (none)

Résumé

Grok 4.20 Beta obtient 5.5 sur AI BENCHY et se classe #116. Il affiche une fiabilité de N/D, un taux de réussite de 35.2%, un coût total de $0.091 et un temps de réponse moyen de 1.19s.

Ce qui rend Grok 4.20 Beta unique : Il est nettement rapide par rapport aux modèles similaires.

Modèle archivé : ce modèle n'est plus mis à jour ni testé sur de nouveaux tests.

Note d'identité

Grok 4.20 Beta était la version préliminaire de xAI: Grok 4.20.

Score

5.5

Cohérence

9.2

Fiabilité

N/D

Total des jetons de sortie

1,591

Total des jetons d'entrée

0

Prix d'entrée

$0.000 / 1M

Prix de sortie

$0.000 / 1M

Tests corrects

Tests incorrects: 13

Taux de réussite par tentative: 35.2%

Tests instables

2

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

1.19s

Temps de réponse (max): 6.48s

Temps de réponse (total): 21.37s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#116 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Historique des runs

Testé le Score Fiabilité Tests corrects Coût total Comparer
2026-05-06 14:15 Nouveau test 5.8 N/D $0.087 Comparer
2026-05-06 14:15 Nouveau test 5.5 N/D $0.091 Comparer
2026-05-06 14:15 Nouveau test 5.5 N/D $0.091 Comparer
2026-05-06 14:15 Suite modifiée 5.5 N/D $0.091 Exécution actuelle
2026-04-11 01:19 Première exécution enregistrée 5.3 N/D $0.091 Comparer

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Comparaison de runs

RunScoreCohérenceFiabilitéTests correctsTests instablesTotal des jetons de sortieTotal des jetons d'entréeCoût totalTemps de réponse (moy.)
2026-05-06 14:15 · Suite modifiée5.59.2N/D5/1821,5910$0.0911.19s
2026-04-11 01:19 · Première exécution enregistrée5.39.2N/D4/1821,5910$0.0911.19s
Différence+0.20.0+1000$0.0000ms

Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie Score Cohérence Tests corrects
Astuces anti-IA 4.0 8.4
Programmation 5.5 10.0
Combiné 3.0 10.0
Analyse et extraction des données 10.0 10.0
Spécifique au domaine 3.0 10.0
Intelligence générale 5.0 10.0
Suivi des instructions 6.3 10.0
Résolution d'énigmes 5.9 7.2
Appel d'outils 10.0 10.0

Modèles comparés