AI BENCHY
Advertise here

#68

Grok 4.20

X AI Releasedatum: 2026-03-31 Getest op: 2026-05-08 15:32 x-ai/grok-4.20::medium
(medium) (none)

Identiteitsnotitie

Grok 4.20 Beta was de previewversie van Grok 4.20.

Score

6.9

Consistentie

8.3

Totale kosten

$0.756

Totaal aantal uitvoer-tokens

130,017

Invoerprijs

$1.250 / 1M

Uitvoerprijs

$2.500 / 1M

Correcte tests

Foute tests: 9

Slaagpercentage per poging: 63.2%

Instabiele tests

4

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

14.53s

Responstijd (max): 63.48s

Responstijd (totaal): 276.06s

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-05-08 15:32 Suite gewijzigd 6.9 10.0 $0.756 Huidige run
2026-04-11 01:44 Eerste geregistreerde run 7.0 n.v.t. $0.743 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotale kostenResponstijd (gem.)
2026-05-08 15:32 · Huidige run6.98.310.010/194130,017$0.75614.53s
2026-04-11 01:44 · Eerste geregistreerde run7.07.8n.v.t.9/185111,626$0.74310.33s
Verschil-0.1+0.5+1-1+18391+$0.014+4203ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.2 7.9
Programmeren 4.3 1.1
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 5.3 10.0
Algemene intelligentie 3.9 2.6
Instructies opvolgen 7.3 6.0
Puzzeloplossing 7.7 10.0
Toolaanroepen 3.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen