#74 Step 3.7 Flash
high- Kosten
- $0.007
- Zeit
- 63.6s
- Token
- 6,030 tok
Zusammenfassung
Step 3.7 Flash erreicht 7.1 bei AI BENCHY und liegt auf #74. Das Modell hat 9.9 Zuverlässigkeit, 65.8% Erfolgsrate, $0.960 Gesamtkosten und 49.43s durchschnittliche Antwortzeit.
7.1
Konsistenz
8.2
Gesamte Ausgabe-Token
828,084
Gesamte Eingabe-Token
0
Eingabepreis
$0.200 / 1M
Ausgabepreis
$1.150 / 1M
Instabile Tests
4
Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).
Generierungs-Showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Testverlauf
| Getestet am | Punktzahl | Zuverlässigkeit | Korrekte Tests | Gesamtkosten | Vergleichen |
|---|---|---|---|---|---|
| 2026-06-04 14:10 Neuer Test hinzugefügt | 7.0 | 10.0 | $1.148 | Vergleichen | |
| 2026-05-29 11:53 Erster Lauf | 7.1 | 9.9 | $0.960 | Aktueller Lauf |
Laufvergleich
| Lauf | Punktzahl | Konsistenz | Zuverlässigkeit | Korrekte Tests | Instabile Tests | Gesamte Ausgabe-Token | Gesamte Eingabe-Token | Gesamtkosten | Antwortzeit (Durchschnitt) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-29 11:53 · Erster Lauf | 7.1 | 8.2 | 9.9 | 11/20 | 4 | 828,084 | 0 | $0.960 | 49.43s |
| 2026-06-04 14:10 · Neuer Test hinzugefügt | 7.0 | 8.2 | 10.0 | 11/21 | 4 | 991,355 | 38,391 | $1.148 | 64.46s |
| Differenz | +0.1 | 0.0 | -0.1 | 0 | 0 | -163271 | -38391 | -$0.189 | -15027ms |
Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.
Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.
| Kategorie | Punktzahl | Konsistenz | Korrekte Tests |
|---|---|---|---|
| Anti-KI-Tricks | 10.0 | 10.0 | |
| Programmierung | 3.6 | 4.6 | |
| Kombiniert | 10.0 | 10.0 | |
| Datenanalyse und -extraktion | 10.0 | 10.0 | |
| Domänenspezifisch | 4.1 | 4.4 | |
| Allgemeine Intelligenz | 5.5 | 10.0 | |
| Befolgung von Anweisungen | 9.8 | 10.0 | |
| Rätsellösen | 5.3 | 7.2 | |
| Werkzeugaufrufe | 10.0 | 10.0 | |
| Allgemeinwissen | 3.0 | 10.0 |