AI BENCHY
Advertise here
#30

GPT-5.4 Mini

OpenAI Veröffentlichung: 2026-03-17 Getestet am: 2026-06-04 13:47 openai/gpt-5.4-mini::medium
(medium) (none)

Zusammenfassung

GPT-5.4 Mini erreicht 8.0 bei AI BENCHY und liegt auf #30. Das Modell hat 10.0 Zuverlässigkeit, 73.0% Erfolgsrate, $0.526 Gesamtkosten und 22.34s durchschnittliche Antwortzeit.

Was GPT-5.4 Mini besonders macht: Am stärksten ist es in Programmierung, wo es #4 erreicht; am schwächsten ist Werkzeugaufrufe mit #16.

Punktzahl

8.0

Konsistenz

8.0

Gesamte Ausgabe-Token

111,118

Gesamte Eingabe-Token

34,116

Eingabepreis

$0.750 / 1M

Ausgabepreis

$4.500 / 1M

Korrekte Tests

Falsche Tests: 9

Erfolgsquote pro Versuch: 73.0%

Instabile Tests

5

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

22.34s

Antwortzeit (Maximum): 138.75s

Antwortzeit (Gesamt): 469.20s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#30 GPT-5.4 Mini

medium
Cost
$0.056
Time
95.5s
Tokens
12,464 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 13:47 Neuer Test hinzugefügt 7.5 10.0 $0.526 Aktueller Lauf
2026-05-22 00:21 Suite geändert 7.1 10.0 $0.487 Vergleichen
2026-04-11 01:44 Erster erfasster Lauf 7.3 k. A. $0.299 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-06-04 13:47 · Aktueller Lauf8.08.010.012/215111,11834,116$0.52622.34s
2026-05-22 00:21 · Suite geändert7.17.610.010/206102,8920$0.48722.14s
Differenz+0.9+0.40.0+2-1+8226+34116+$0.039+206ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-04 15:40 $0.750 / 1M $4.500 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.6 7.9
Programmierung 8.4 7.4
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 4.1 4.4
Allgemeine Intelligenz 4.5 10.0
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 7.8 10.0
Werkzeugaufrufe 4.7 1.6
Allgemeinwissen 3.0 10.0

Verglichene Modelle