AI BENCHY
Advertise here
#46

Grok Build 0.1

X AI Sortie: 2026-05-21 Testé le: 2026-05-22 00:36 x-ai/grok-build-0.1::medium
~300B au total (~30B actifs)MoESource ferméeEstimé
(medium) (none)

Résumé

Grok Build 0.1 obtient 7.6 sur AI BENCHY et se classe #46. Il affiche une fiabilité de 10.0, un taux de réussite de 70.0%, un coût total de $0.633 et un temps de réponse moyen de 26.36s.

Ce qui rend Grok Build 0.1 unique : Il se distingue surtout en Spécifique au domaine, où il se classe #4, tandis que Programmation est son point le plus faible avec #18.

Données du modèle

Date de recherche : 2026-08-12

Estimé
Paramètres
~300B au total (~30B actifs)
Architecture
MoE
Disponibilité
Source fermée
Licence
-

Meilleure estimation fondée sur les informations publiques ; le fournisseur n’a pas communiqué toutes les valeurs.

Score

7.6

Cohérence

8.5

Fiabilité

10.0

Total des jetons de sortie

295,603

Total des jetons d'entrée

0

Prix d'entrée

$1.000 / 1M

Prix de sortie

$2.000 / 1M

Tests corrects

Tests incorrects: 8

Taux de réussite par tentative: 70.0%

Tests instables

4

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

26.36s

Temps de réponse (max): 103.89s

Temps de réponse (total): 527.19s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 xAI: Grok Build 0.1

medium
Coût
$0.028
Temps
81.3s
Tokens
14,009 tok

Historique des runs

Testé le Score Fiabilité Tests corrects Coût total Comparer
2026-08-14 02:58 Nouveau test 7.5 10.0 $1.130 Comparer
2026-07-16 23:10 Nouveau test ajouté 7.6 10.0 $1.097 Comparer
2026-06-04 14:22 Nouveau test ajouté 7.4 10.0 $0.927 Comparer
2026-05-26 13:30 Nouveau test 7.7 10.0 $0.729 Comparer
2026-05-22 00:36 Suite modifiée 7.6 10.0 $0.633 Exécution actuelle

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Comparaison de runs

RunCouverture du benchmarkScoreCohérenceFiabilitéTests correctsTests instablesTotal des jetons de sortieTotal des jetons d'entréeCoût totalTemps de réponse (moy.)
2026-05-22 00:36 · Suite modifiée60/60 tentatives7.68.510.012/204295,6030$0.63326.36s
2026-08-14 02:58 · Nouveau test66/66 tentatives7.59.610.013/221511,406106,946$1.13054.50s
Différence+0.1-1.10.0-1+3-215803-106946-$0.498-28144ms

La couverture du benchmark diffère : 60/60 tentatives (Objectif : 3 répétitions par test) contre 66/66 tentatives (Objectif : 3 répétitions par test). Les totaux et les métriques sensibles aux répétitions ne sont pas directement comparables.

Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie Score Cohérence Tests corrects
Astuces anti-IA 10.0 10.0
Programmation 5.3 2.9
Combiné 10.0 10.0
Analyse et extraction des données 10.0 10.0
Spécifique au domaine 5.3 10.0
Intelligence générale 3.8 2.5
Suivi des instructions 9.8 10.0
Résolution d'énigmes 6.2 7.5
Appel d'outils 10.0 10.0
Culture générale 3.0 10.0

Modèles comparés