AI BENCHY
Advertise here
#106

Claude Opus 4.8

Anthropic Veröffentlichung: 2026-05-28 Getestet am: 2026-08-14 02:08 anthropic/claude-opus-4.8::none
~5T insgesamt (~500B aktiv)MoEGeschlossenGeschätzt
(medium) (low) (none)

Zusammenfassung

Claude Opus 4.8 erreicht 7.3 bei AI BENCHY und liegt auf #106. Das Modell hat 10.0 Zuverlässigkeit, 63.6% Erfolgsrate, $1.166 Gesamtkosten und 4.92s durchschnittliche Antwortzeit.

Was Claude Opus 4.8 besonders macht: Am stärksten ist es in Allgemeine Intelligenz, wo es #1 erreicht; am schwächsten ist Datenanalyse und -extraktion mit #16. Es ist im Vergleich zu ähnlichen Modellen auffällig schnell.

Modelldaten

Recherchiert am 2026-08-12

Geschätzt
Parameter
~5T insgesamt (~500B aktiv)
Architektur
MoE
Verfügbarkeit
Geschlossen
Lizenz
-

Beste Schätzung auf Grundlage öffentlicher Informationen; der Anbieter hat nicht alle Werte offengelegt.

Punktzahl

7.3

Konsistenz

9.2

Gesamte Ausgabe-Token

16,797

Gesamte Eingabe-Token

149,203

Eingabepreis

$5.000 / 1M

Ausgabepreis

$25.000 / 1M

Korrekte Tests

Falsche Tests: 9

Erfolgsquote pro Versuch: 63.6%

Instabile Tests

2

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

4.92s

Antwortzeit (Maximum): 35.03s

Antwortzeit (Gesamt): 108.24s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#106 Claude Opus 4.8

none
Kosten
$0.053
Zeit
22.0s
Token
2,253 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 02:08 Erneuter Test 7.3 10.0 $1.166 Aktueller Lauf
2026-07-16 22:29 Neuer Test hinzugefügt 7.3 10.0 $1.166 Vergleichen
2026-06-30 22:01 Erneuter Test 7.2 10.0 $0.539 Vergleichen
2026-06-04 13:44 Neuer Test hinzugefügt 7.0 10.0 $0.539 Vergleichen
2026-05-28 17:34 Erster Lauf 7.3 10.0 $0.519 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-08-14 02:08 · Aktueller Lauf66/66 Versuche7.39.210.013/22216,797149,203$1.1664.92s
2026-05-28 17:34 · Erster Lauf60/60 Versuche7.39.210.012/2028,0980$0.5193.51s
Differenz0.00.00.0+10+8699+149203+$0.648+1410ms

Die Benchmark-Abdeckung unterscheidet sich: 66/66 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 60/60 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-08-14 12:51 $5.000 / 1M $25.000 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 6.5 10.0
Programmierung 5.5 10.0
Kombiniert 9.8 10.0
Datenanalyse und -extraktion 7.3 5.8
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 10.0 10.0
Befolgung von Anweisungen 9.9 10.0
Rätsellösen 7.7 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle