#29 Grok 4.20 Beta
medium- Cost
- $0.034
- Time
- 91.0s
- Tokens
- 13,523 tok
Résumé
Grok 4.20 Beta obtient 8.0 sur AI BENCHY et se classe #29. Il affiche une fiabilité de N/D, un taux de réussite de 74.1%, un coût total de $0.633 et un temps de réponse moyen de 9.81s.
Ce qui rend Grok 4.20 Beta unique : Il se distingue surtout en Programmation, où il se classe #1, tandis que Suivi des instructions est son point le plus faible avec #15.
Modèle archivé : ce modèle n'est plus mis à jour ni testé sur de nouveaux tests.
Note d'identité
Grok 4.20 Beta était la version préliminaire de xAI: Grok 4.20.
8.0
Cohérence
9.1
N/D
$0.633
Total des jetons de sortie
93,477
Total des jetons d'entrée
0
Prix d'entrée
$0.000 / 1M
Prix de sortie
$0.000 / 1M
Tests instables
2
Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).
Generation showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Historique des runs
| Testé le | Score | Fiabilité | Tests corrects | Coût total | Comparer |
|---|---|---|---|---|---|
| 2026-05-06 14:15 Nouveau test | 8.5 | N/D | $0.750 ↑ | Comparer | |
| 2026-05-06 14:15 Nouveau test | 8.2 | N/D | $0.633 | Comparer | |
| 2026-05-06 14:15 Nouveau test | 8.2 | N/D | $0.633 | Comparer | |
| 2026-05-06 14:15 Suite modifiée | 8.2 | N/D | $0.633 | Comparer | |
| 2026-04-11 01:19 Première exécution enregistrée | 8.0 | N/D | $0.633 | Exécution actuelle |
Comparaison de runs
| Run | Score | Cohérence | Fiabilité | Tests corrects | Tests instables | Total des jetons de sortie | Total des jetons d'entrée | Coût total | Temps de réponse (moy.) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:19 · Première exécution enregistrée | 8.0 | 9.1 | N/D | 12/18 | 2 | 93,477 | 0 | $0.633 | 9.81s |
| 2026-05-06 14:15 · Nouveau test | 8.5 | 9.5 | N/D | 14/18 | 1 | 93,212 | 35,955 | $0.750 | 9.75s |
| Différence | -0.5 | -0.4 | -2 | +1 | +265 | -35955 | -$0.118 | +63ms |
Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.
Graphiques
Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.
Meilleurs modèles par score
Score vs Coût total
Temps de réponse (moy.)
Score vs Temps de réponse (moy.)
Total des jetons de sortie
Score vs Total des jetons de sortie
Comparaison rapide
Répartition par catégorie
| Catégorie | Score | Cohérence | Tests corrects |
|---|---|---|---|
| Astuces anti-IA | 8.7 | 7.9 | |
| Programmation | 10.0 | 10.0 | |
| Combiné | 10.0 | 10.0 | |
| Analyse et extraction des données | 10.0 | 10.0 | |
| Spécifique au domaine | 5.3 | 10.0 | |
| Intelligence générale | 10.0 | 10.0 | |
| Suivi des instructions | 8.3 | 10.0 | |
| Résolution d'énigmes | 8.2 | 7.2 | |
| Appel d'outils | 3.0 | 10.0 |