AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#46

Claude Sonnet 5

Anthropic Veröffentlichung: 2026-06-30 Getestet am: 2026-08-14 02:11 anthropic/claude-sonnet-5::medium
~1T insgesamt (~100B aktiv)MoEGeschlossenGeschätzt
(medium) (none)

Zusammenfassung

Claude Sonnet 5 erreicht 8.2 bei AI BENCHY und liegt auf #46. Das Modell hat 10.0 Zuverlässigkeit, 75.8% Erfolgsrate, $0.922 Gesamtkosten und 12.54s durchschnittliche Antwortzeit.

Was Claude Sonnet 5 besonders macht: Am stärksten ist es in Befolgung von Anweisungen, wo es #3 erreicht; am schwächsten ist Kombiniert mit #13.

Modelldaten

Recherchiert am 2026-08-12

Geschätzt
Parameter
~1T insgesamt (~100B aktiv)
Architektur
MoE
Verfügbarkeit
Geschlossen
Lizenz
-

Beste Schätzung auf Grundlage öffentlicher Informationen; der Anbieter hat nicht alle Werte offengelegt.

Punktzahl

8.2

Konsistenz

9.0

Gesamte Ausgabe-Token

63,204

Gesamte Eingabe-Token

145,953

Eingabepreis

$2.000 / 1M

Ausgabepreis

$10.000 / 1M

Korrekte Tests

Falsche Tests: 7

Erfolgsquote pro Versuch: 75.8%

Instabile Tests

3

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

12.54s

Antwortzeit (Maximum): 66.71s

Antwortzeit (Gesamt): 275.90s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 Claude Sonnet 5

medium
Kosten
$0.007
Zeit
6.4s
Token
832 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 02:11 Erneuter Test 8.2 10.0 $0.922 Aktueller Lauf
2026-07-16 22:33 Neuer Test hinzugefügt 8.3 10.0 $0.922 Vergleichen
2026-06-30 21:33 Erster Lauf 7.9 10.0 $0.550 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-08-14 02:11 · Aktueller Lauf66/66 Versuche8.29.010.015/22363,204145,953$0.92212.54s
2026-06-30 21:33 · Erster Lauf63/63 Versuche7.99.010.015/21341,68567,416$0.5509.94s
Differenz+0.30.00.000+21519+78537+$0.373+2603ms

Die Benchmark-Abdeckung unterscheidet sich: 66/66 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 63/63 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-08-14 12:51 $2.000 / 1M $10.000 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 10.0 10.0
Programmierung 9.0 7.9
Kombiniert 7.3 6.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.3 10.0
Allgemeine Intelligenz 4.8 3.2
Befolgung von Anweisungen 9.9 10.0
Rätsellösen 7.7 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle