AI BENCHY
Advertise here
#47

Claude Sonnet 4.6

Anthropic Veröffentlichung: 2026-02-17 Getestet am: 2026-05-22 00:14 anthropic/claude-sonnet-4.6::medium
(medium) (none)

Zusammenfassung

Claude Sonnet 4.6 erreicht 7.6 bei AI BENCHY und liegt auf #47. Das Modell hat 10.0 Zuverlässigkeit, 68.3% Erfolgsrate, $1.330 Gesamtkosten und 15.72s durchschnittliche Antwortzeit.

Was Claude Sonnet 4.6 besonders macht: Am stärksten ist es in Allgemeine Intelligenz, wo es #1 erreicht; am schwächsten ist Domänenspezifisch mit #15.

Punktzahl

7.6

Konsistenz

9.2

Gesamte Ausgabe-Token

79,442

Gesamte Eingabe-Token

0

Eingabepreis

$3.000 / 1M

Ausgabepreis

$15.000 / 1M

Korrekte Tests

Falsche Tests: 7

Erfolgsquote pro Versuch: 68.3%

Instabile Tests

2

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

15.72s

Antwortzeit (Maximum): 46.35s

Antwortzeit (Gesamt): 188.69s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Sonnet 4.6

medium
Ungültiges SVG
Kosten
$0.000
Zeit
300.0s
Token
0 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 13:42 Neuer Test hinzugefügt 7.4 10.0 $1.418 Vergleichen
2026-05-22 00:14 Suite geändert 7.6 10.0 $1.330 Aktueller Lauf
2026-04-11 01:44 Erster erfasster Lauf 8.0 k. A. $1.161 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-05-22 00:14 · Suite geändert7.69.210.013/20279,4420$1.33015.72s
2026-04-11 01:44 · Erster erfasster Lauf8.09.5k. A.13/18168,8520$1.16112.66s
Differenz-0.5-0.30+1+105900+$0.169+3062ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 6.5 10.0
Programmierung 6.9 6.0
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 2.9 7.2
Allgemeine Intelligenz 10.0 10.0
Befolgung von Anweisungen 10.0 10.0
Rätsellösen 10.0 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle