AI BENCHY
Advertise here
#86

Grok 4.20 Beta

X AI Releasedatum: 2026-03-12 Getest op: 2026-04-11 01:19 x-ai/grok-4.20-beta::none
(medium) (none)

Samenvatting

Grok 4.20 Beta scoort 5.3 op AI BENCHY en staat op #86. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 29.6%, $0.091 totale kosten en 1.19s gemiddelde responstijd.

Gearchiveerd model: dit model wordt niet langer bijgewerkt of getest op nieuwe tests.

Identiteitsnotitie

Grok 4.20 Beta was de previewversie van xAI: Grok 4.20.

Score

5.3

Consistentie

9.2

Betrouwbaarheid

n.v.t.

Totaal aantal uitvoer-tokens

1,591

Totaal aantal invoer-tokens

0

Invoerprijs

$0.000 / 1M

Uitvoerprijs

$0.000 / 1M

Correcte tests

Foute tests: 14

Slaagpercentage per poging: 29.6%

Instabiele tests

2

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

1.19s

Responstijd (max): 6.48s

Responstijd (totaal): 21.37s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#86 Grok 4.20 Beta

none
Invalid SVG
Cost
$0.004
Time
8.5s
Tokens
1,672 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-05-06 14:15 Hertest 5.8 n.v.t. $0.087 Vergelijken
2026-05-06 14:15 Hertest 5.5 n.v.t. $0.091 Vergelijken
2026-05-06 14:15 Hertest 5.5 n.v.t. $0.091 Vergelijken
2026-05-06 14:15 Suite gewijzigd 5.5 n.v.t. $0.091 Vergelijken
2026-04-11 01:19 Eerste geregistreerde run 5.3 n.v.t. $0.091 Huidige run

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-04-11 01:19 · Eerste geregistreerde run5.39.2n.v.t.4/1821,5910$0.0911.19s
2026-05-06 14:15 · Suite gewijzigd5.59.2n.v.t.5/1821,5910$0.0911.19s
Verschil-0.20.0-1000$0.0000ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 4.0 8.4
Programmeren 5.5 10.0
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 3.0 10.0
Algemene intelligentie 5.0 10.0
Instructies opvolgen 4.8 10.0
Puzzeloplossing 5.9 7.2
Toolaanroepen 10.0 10.0

Vergeleken modellen