AI BENCHY
Advertise here
#196

Grok 4.20 Multi Agent Beta

X AI Veröffentlichung: 2026-03-12 Getestet am: 2026-05-06 14:16 x-ai/grok-4.20-multi-agent-beta::medium

Zusammenfassung

Grok 4.20 Multi Agent Beta erreicht 4.8 bei AI BENCHY und liegt auf #196. Das Modell hat k. A. Zuverlässigkeit, 48.5% Erfolgsrate, $5.599 Gesamtkosten und 9.69s durchschnittliche Antwortzeit.

Was Grok 4.20 Multi Agent Beta besonders macht: Am stärksten ist es in Datenanalyse und -extraktion, wo es #1 erreicht; am schwächsten ist Allgemeinwissen mit #13. Es nutzt ungewöhnlich viele Reasoning-Tokens, was langsamere oder teurere Läufe erklären kann.

Archiviertes Modell: Dieses Modell wird nicht mehr aktualisiert und nicht mehr in neuen Tests getestet.

Punktzahl

4.8

Konsistenz

6.4

Zuverlässigkeit

k. A.

Gesamtkosten (aktueller Preis)

$5.599 ↑ +11.2%

Getestet zu: $5.034

Gesamte Ausgabe-Token

600,042

Gesamte Eingabe-Token

721,952

Eingabepreis

$4.235 / 1M

Ausgabepreis

$4.235 / 1M

Korrekte Tests

Falsche Tests: 10

Erfolgsquote pro Versuch: 48.5%

Instabile Tests

5

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

9.69s

Antwortzeit (Maximum): 35.28s

Antwortzeit (Gesamt): 155.07s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#196 Grok 4.20 Multi Agent Beta

medium
Kosten
$0.261
Zeit
123.4s
Token
199,344 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-05-06 14:16 Erneuter Test 4.8 k. A. $5.599 Aktueller Lauf
2026-05-06 14:16 Erneuter Test 6.6 k. A. $5.599 Vergleichen
2026-05-06 14:16 Erneuter Test 6.6 k. A. $5.074 Vergleichen
2026-05-06 14:16 Suite geändert 6.6 k. A. $5.074 Vergleichen
2026-04-11 01:19 Erster erfasster Lauf 6.4 k. A. $5.074 Vergleichen

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-05-06 14:16 · Aktueller Lauf4.86.4k. A.8/185600,042721,952$5.5999.69s
2026-04-11 01:19 · Erster erfasster Lauf6.47.4k. A.7/186608,7040$5.0749.80s
Differenz-1.7-1.0+1-1-8662+721952+$0.526-105ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-04 15:40 $4.235 / 1M $4.235 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 6.9 5.8
Programmierung 3.3 3.3
Kombiniert 1.5 5.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 2.9 7.2
Allgemeine Intelligenz 5.8 2.8
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 6.7 7.9
Werkzeugaufrufe 3.0 10.0
Allgemeinwissen 0.0 0.0

Verglichene Modelle