AI BENCHY
Advertise here
#56

Step 3.7 Flash

Stepfun Veröffentlichung: 2026-05-29 Getestet am: 2026-06-04 13:49 stepfun/step-3.7-flash::low
198B insgesamt (11B aktiv)MoEOpen Source

Zusammenfassung

Step 3.7 Flash erreicht 7.3 bei AI BENCHY und liegt auf #56. Das Modell hat 10.0 Zuverlässigkeit, 68.3% Erfolgsrate, $0.341 Gesamtkosten und 15.74s durchschnittliche Antwortzeit.

Was Step 3.7 Flash besonders macht: Am stärksten ist es in Kombiniert, wo es #1 erreicht; am schwächsten ist Allgemeine Intelligenz mit #18.

Modelldaten

Recherchiert am 2026-08-12

Angegeben
Parameter
198B insgesamt (11B aktiv)
Architektur
MoE
Verfügbarkeit
Open Source
Lizenz
Apache-2.0

Punktzahl

7.3

Konsistenz

8.4

Gesamte Ausgabe-Token

289,325

Gesamte Eingabe-Token

40,101

Eingabepreis

$0.200 / 1M

Ausgabepreis

$1.150 / 1M

Korrekte Tests

Falsche Tests: 9

Erfolgsquote pro Versuch: 68.3%

Instabile Tests

4

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

15.74s

Antwortzeit (Maximum): 124.75s

Antwortzeit (Gesamt): 330.63s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Step 3.7 Flash

low
Ungültiges SVG
Kosten
$0.004
Zeit
25.3s
Token
3,072 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 02:29 Erneuter Test 7.1 10.0 $0.390 Vergleichen
2026-07-16 22:46 Neuer Test hinzugefügt 7.3 10.0 $0.454 Vergleichen
2026-06-04 13:49 Neuer Test hinzugefügt 7.3 10.0 $0.341 Aktueller Lauf
2026-05-29 11:49 Erster Lauf 7.4 10.0 $0.336 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-06-04 13:49 · Neuer Test hinzugefügt63/63 Versuche7.38.410.012/214289,32540,101$0.34115.74s
2026-05-29 11:49 · Erster Lauf60/60 Versuche7.48.710.012/203285,2090$0.33616.06s
Differenz-0.1-0.30.00+1+4116+40101+$0.006-311ms

Die Benchmark-Abdeckung unterscheidet sich: 63/63 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 60/60 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-04 14:42 $0.200 / 1M $1.150 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.7 7.9
Programmierung 8.2 7.2
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 7.3 5.8
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 3.4 9.3
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 5.5 9.9
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle