AI BENCHY
Advertise here
#52

Grok 4.20

X AI Veröffentlichung: 2026-03-31 Getestet am: 2026-04-11 01:44 x-ai/grok-4.20::medium
(medium) (none)

Zusammenfassung

Grok 4.20 erreicht 7.0 bei AI BENCHY und liegt auf #52. Das Modell hat k. A. Zuverlässigkeit, 66.7% Erfolgsrate, $0.743 Gesamtkosten und 10.33s durchschnittliche Antwortzeit.

Identitätshinweis

Grok 4.20 Beta war die Vorschauversion von Grok 4.20.

Punktzahl

7.0

Konsistenz

7.8

Zuverlässigkeit

k. A.

Gesamte Ausgabe-Token

111,626

Gesamte Eingabe-Token

0

Eingabepreis

$2.000 / 1M

Ausgabepreis

$6.000 / 1M

Korrekte Tests

Falsche Tests: 9

Erfolgsquote pro Versuch: 66.7%

Instabile Tests

5

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

10.33s

Antwortzeit (Maximum): 29.87s

Antwortzeit (Gesamt): 185.87s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 xAI: Grok 4.20

medium
Kosten
$0.041
Zeit
110.3s
Token
16,336 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 14:17 Neuer Test hinzugefügt 7.1 10.0 $0.609 Vergleichen
2026-05-22 00:32 Suite geändert 6.7 10.0 $0.832 Vergleichen
2026-05-08 15:32 Suite geändert 6.9 10.0 $0.756 Vergleichen
2026-04-11 01:44 Erster erfasster Lauf 7.0 k. A. $0.743 Aktueller Lauf

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-04-11 01:44 · Erster erfasster Lauf7.07.8k. A.9/185111,6260$0.74310.33s
2026-05-08 15:32 · Suite geändert6.98.310.010/194130,0170$0.75614.53s
Differenz+0.1-0.5-1+1-183910-$0.014-4203ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.2 7.9
Programmierung 4.3 1.1
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.3 10.0
Allgemeine Intelligenz 5.8 2.8
Befolgung von Anweisungen 7.3 5.9
Rätsellösen 6.4 7.7
Werkzeugaufrufe 3.0 10.0

Verglichene Modelle