AI BENCHY
Advertise here
#69

Claude Sonnet 4.6

Anthropic Veröffentlichung: 2026-02-17 Getestet am: 2026-05-22 00:12 anthropic/claude-sonnet-4.6::none
(medium) (none)

Zusammenfassung

Claude Sonnet 4.6 erreicht 7.0 bei AI BENCHY und liegt auf #69. Das Modell hat 10.0 Zuverlässigkeit, 58.3% Erfolgsrate, $0.306 Gesamtkosten und 5.33s durchschnittliche Antwortzeit.

Was Claude Sonnet 4.6 besonders macht: Am stärksten ist es in Domänenspezifisch, wo es #2 erreicht; am schwächsten ist Anti-KI-Tricks mit #13.

Punktzahl

7.0

Konsistenz

9.7

Gesamte Ausgabe-Token

9,453

Gesamte Eingabe-Token

0

Eingabepreis

$3.000 / 1M

Ausgabepreis

$15.000 / 1M

Korrekte Tests

Falsche Tests: 9

Erfolgsquote pro Versuch: 58.3%

Instabile Tests

1

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

5.33s

Antwortzeit (Maximum): 23.84s

Antwortzeit (Gesamt): 69.29s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#69 Claude Sonnet 4.6

none
Kosten
$0.038
Zeit
27.3s
Token
2,598 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 13:40 Neuer Test hinzugefügt 6.8 10.0 $0.316 Vergleichen
2026-05-22 00:12 Suite geändert 7.0 10.0 $0.306 Aktueller Lauf
2026-04-11 01:44 Erster erfasster Lauf 7.4 k. A. $0.262 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-05-22 00:12 · Suite geändert7.09.710.011/2019,4530$0.3065.33s
2026-04-11 01:44 · Erster erfasster Lauf7.49.6k. A.11/1817,4330$0.2624.98s
Differenz-0.4+0.100+20200+$0.045+345ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 4.8 10.0
Programmierung 6.8 10.0
Kombiniert 9.5 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 7.7 10.0
Allgemeine Intelligenz 6.1 3.1
Befolgung von Anweisungen 6.5 10.0
Rätsellösen 7.7 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle