AI BENCHY
Advertise here

#17

GPT-5.4

OpenAI Veröffentlichung: 2026-03-05 Getestet am: 2026-04-11 01:44 openai/gpt-5.4::medium
(medium) (none)

Punktzahl

8.2

Konsistenz

8.7

Zuverlässigkeit

k. A.

Gesamte Ausgabe-Token

50,901

Gesamte Eingabe-Token

0

Eingabepreis

$2.500 / 1M

Ausgabepreis

$15.000 / 1M

Korrekte Tests

Falsche Tests: 5

Erfolgsquote pro Versuch: 79.6%

Instabile Tests

3

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

18.63s

Antwortzeit (Maximum): 100.41s

Antwortzeit (Gesamt): 335.26s

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-05-22 00:19 Suite geändert 7.9 10.0 $1.140 Vergleichen
2026-04-11 01:44 Erster erfasster Lauf 8.2 k. A. $0.832 Aktueller Lauf

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-04-11 01:44 · Erster erfasster Lauf8.28.7k. A.13/18350,9010$0.83218.63s
2026-05-22 00:19 · Suite geändert7.98.510.013/20470,7250$1.14022.31s
Differenz+0.3+0.20-1-198240-$0.308-3682ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.3 10.0
Programmierung 10.0 10.0
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 4.7 3.1
Befolgung von Anweisungen 10.0 10.0
Rätsellösen 8.2 7.2
Werkzeugaufrufe 10.0 10.0

Verglichene Modelle