AI BENCHY
Advertise here
#52

Grok 4.20

X AI Releasedatum: 2026-03-31 Getest op: 2026-04-11 01:44 x-ai/grok-4.20::medium
(medium) (none)

Samenvatting

Grok 4.20 scoort 7.0 op AI BENCHY en staat op #52. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 66.7%, $0.743 totale kosten en 10.33s gemiddelde responstijd.

Identiteitsnotitie

Grok 4.20 Beta was de previewversie van Grok 4.20.

Score

7.0

Consistentie

7.8

Betrouwbaarheid

n.v.t.

Totaal aantal uitvoer-tokens

111,626

Totaal aantal invoer-tokens

0

Invoerprijs

$2.000 / 1M

Uitvoerprijs

$6.000 / 1M

Correcte tests

Foute tests: 9

Slaagpercentage per poging: 66.7%

Instabiele tests

5

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

10.33s

Responstijd (max): 29.87s

Responstijd (totaal): 185.87s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 xAI: Grok 4.20

medium
Kosten
$0.041
Tijd
110.3s
Tokens
16,336 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-06-04 14:17 Nieuwe test toegevoegd 7.1 10.0 $0.609 Vergelijken
2026-05-22 00:32 Suite gewijzigd 6.7 10.0 $0.832 Vergelijken
2026-05-08 15:32 Suite gewijzigd 6.9 10.0 $0.756 Vergelijken
2026-04-11 01:44 Eerste geregistreerde run 7.0 n.v.t. $0.743 Huidige run

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-04-11 01:44 · Eerste geregistreerde run7.07.8n.v.t.9/185111,6260$0.74310.33s
2026-06-04 14:17 · Nieuwe test toegevoegd7.18.810.012/213221,34344,433$0.60927.68s
Verschil-0.2-1.0-3+2-109717-44433+$0.134-17353ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.2 7.9
Programmeren 4.3 1.1
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 5.3 10.0
Algemene intelligentie 5.8 2.8
Instructies opvolgen 7.3 5.9
Puzzeloplossing 6.4 7.7
Toolaanroepen 3.0 10.0

Vergeleken modellen